商汤科技2020数据分析师0820笔试题目整理

2024-02-03 00:38

本文主要是介绍商汤科技2020数据分析师0820笔试题目整理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

2019年8月19日
问答题1:缺失值数据预处理有哪些方法?https://juejin.im/post/5b5c4e6c6fb9a04f90791e0c
处理缺失值的方法如下:删除记录,数据填补和不处理。主要以数据填补为主。
在这里插入图片描述
1 删除记录:该种方法在样本数据量十分大且确实值不多的情况下非常有效。
2 数据填补:插补大体有替换缺失值,拟合缺失值,虚拟变量等操作。替换是通过数据中非缺失数据的相似性来填补,其中的核心思想是发现相同群体的共同特征,拟合是通过其他特征建模来填补,虚拟变量是衍生的新变量代替缺失值。
替换缺失值:
1 定类数据:众数填补
2定量(定比)数据: 平均数或中位数填补
3 热卡填补: 热卡填充法是在完整数据中找到一个与它最相似的对象,然后用这个相似对象的值来进行填充。
4 k最近距离邻法(k-means cluster)
通过无监督机器学习的k均值聚类的方法将所有样本进行聚类划分,然后在通过划分的种类的均值对各自类中的缺失值进行填补。本质是通过找相似来填补缺失值。
拟合缺失值
如果缺失的变量跟其他特征变量相关,则通过建模预测的缺失值就有意义,反之则不用
回归预测:
基于完整的数据集,建立回归方程。对于有缺失值的特征值,将已知的特征值代入模型来估计未知特征值,一次估计值来进行填充。(该方法适合缺失值是连续的,即定量的类型,才可以使用回归来预测。)
极大似然估计:
在随机类型为随机缺失的条件下,假设模型对于完整的样本是正确的,那么通过观测数据的边际分布可以对未知参数进行极大似然估计。(该方法适合大样本)
多重插补:
多重插补的思想来源于贝叶斯估计,认为待插补的值是随机的,它的值来自于已观测到的值。具体实践上通常是估计出待插补的值,然后再加上不同的额噪声,形成多组可选插补值。根据某种选择依据,选取最合适的插补值。
根据数据缺失机制、模式以及变量类型,可分别采用回归、预测均数匹配( predictive mean matching, PMM )、趋势得分( propensity score, PS )、Logistic回归、判别分析以及马尔可夫链蒙特卡罗( Markov Chain Monte Carlo, MCMC) 等不同的方法进行填补。
注:使用多重插补要求数据缺失值为随机性缺失,一般重复次数20-50次精准度很高,但是计算也很复杂,需要大量计算。
随机森林:
虚拟变量
虚拟变量其实就是缺失值的一种衍生变量,。具体做法是通过判断特征值是否有缺失值来定义一个新的二分类变量。
不处理
在希望保持原始信息不发生变化的前提下对信息系统进行处理

问答题2中心极限定理是什么?他的应用方向是:
中心极限定理就是研究随机变量和的极限分布在什么条件下为正态分布的问题。
(1)独立同分布的中心极限定理[林德伯格-列维(Lindburg-Levy)定理]
应用一:求随机变量之和Sn落在某区间的概率。
应用二:已知随机变量之和Sn取值的概率,求随机变量的个数n。
(2)棣莫佛-拉普拉斯(de Movire - Laplace)定理
应用一:近似计算服从二项分布的随机变量在某范围内取值的概率
应用二:已知服从二项分布的随机变量在某范围内取值的概率,估计该范围(或该范围的最大值)。
应用三:与用频率估计概率有关的二项分布的近似计算
(3)李雅普诺夫定理
问答题3:
在这里插入图片描述
1 对于外层职工关系 A 中的每一个记录,都要对内层职工关系B进行检索,所有效率不高
2.(1)使用临时表
SELECT MAX(月工资) as 最高工资,部门号 INTO temp FROM 职工
GROUP BY 部门号;
SELECT 职工号 FROM 职工,temp WHERE 月工资=最高工资
AND 职工.部门号 = temp.部门号;
(2) SELECT 职工号 FROM 职工,(SELECT MAX(月工资) as 最高工资,部门号 FROM 职工 GROUP BY 部门号) as DEPMAX

WHERE 月工资=最高工资 AND 职工.部门号 = DEPMAX. 部门号;
SQL经典5道
https://cloud.tencent.com/developer/article/1062773
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述v
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

这篇关于商汤科技2020数据分析师0820笔试题目整理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/672497

相关文章

C++如何通过Qt反射机制实现数据类序列化

《C++如何通过Qt反射机制实现数据类序列化》在C++工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作,所以本文就来聊聊C++如何通过Qt反射机制实现数据类序列化吧... 目录设计预期设计思路代码实现使用方法在 C++ 工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作。由于数据类

SpringBoot使用GZIP压缩反回数据问题

《SpringBoot使用GZIP压缩反回数据问题》:本文主要介绍SpringBoot使用GZIP压缩反回数据问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录SpringBoot使用GZIP压缩反回数据1、初识gzip2、gzip是什么,可以干什么?3、Spr

SpringBoot集成Milvus实现数据增删改查功能

《SpringBoot集成Milvus实现数据增删改查功能》milvus支持的语言比较多,支持python,Java,Go,node等开发语言,本文主要介绍如何使用Java语言,采用springboo... 目录1、Milvus基本概念2、添加maven依赖3、配置yml文件4、创建MilvusClient

SpringValidation数据校验之约束注解与分组校验方式

《SpringValidation数据校验之约束注解与分组校验方式》本文将深入探讨SpringValidation的核心功能,帮助开发者掌握约束注解的使用技巧和分组校验的高级应用,从而构建更加健壮和可... 目录引言一、Spring Validation基础架构1.1 jsR-380标准与Spring整合1

MySQL 中查询 VARCHAR 类型 JSON 数据的问题记录

《MySQL中查询VARCHAR类型JSON数据的问题记录》在数据库设计中,有时我们会将JSON数据存储在VARCHAR或TEXT类型字段中,本文将详细介绍如何在MySQL中有效查询存储为V... 目录一、问题背景二、mysql jsON 函数2.1 常用 JSON 函数三、查询示例3.1 基本查询3.2

SpringBatch数据写入实现

《SpringBatch数据写入实现》SpringBatch通过ItemWriter接口及其丰富的实现,提供了强大的数据写入能力,本文主要介绍了SpringBatch数据写入实现,具有一定的参考价值,... 目录python引言一、ItemWriter核心概念二、数据库写入实现三、文件写入实现四、多目标写入

使用Python将JSON,XML和YAML数据写入Excel文件

《使用Python将JSON,XML和YAML数据写入Excel文件》JSON、XML和YAML作为主流结构化数据格式,因其层次化表达能力和跨平台兼容性,已成为系统间数据交换的通用载体,本文将介绍如何... 目录如何使用python写入数据到Excel工作表用Python导入jsON数据到Excel工作表用

Mysql如何将数据按照年月分组的统计

《Mysql如何将数据按照年月分组的统计》:本文主要介绍Mysql如何将数据按照年月分组的统计方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录mysql将数据按照年月分组的统计要的效果方案总结Mysql将数据按照年月分组的统计要的效果方案① 使用 DA

鸿蒙中Axios数据请求的封装和配置方法

《鸿蒙中Axios数据请求的封装和配置方法》:本文主要介绍鸿蒙中Axios数据请求的封装和配置方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录1.配置权限 应用级权限和系统级权限2.配置网络请求的代码3.下载在Entry中 下载AxIOS4.封装Htt

Python获取中国节假日数据记录入JSON文件

《Python获取中国节假日数据记录入JSON文件》项目系统内置的日历应用为了提升用户体验,特别设置了在调休日期显示“休”的UI图标功能,那么问题是这些调休数据从哪里来呢?我尝试一种更为智能的方法:P... 目录节假日数据获取存入jsON文件节假日数据读取封装完整代码项目系统内置的日历应用为了提升用户体验,