二手车售价预测赛题理解与EDA

2024-03-20 06:59

本文主要是介绍二手车售价预测赛题理解与EDA,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

二手车售价预测 赛题理解与EDA

一、赛题理解

1.1讲座重难点

  • 赛题理解的关键(包括但不仅限)

    • 比赛的注意事项(数据源、特征说明、任务目标、评价指标(优化的方向))

    • 题目所给数据的隐藏条件

  • 实战的一般流程
    由自己写的或者官方的Baseline
    在这里插入图片描述

1.2对于本次题目的理解

1.2.1题目介绍

​ 给了一堆脱敏后的德国二手车数据(超370,000条样本),训练集 ‘used_car_train_20200313.csv’ 包含了20个特征,10万条数据,测试集一共有两个,各5万条测试样本。赛题要求用已知数据,预测而二手车的数量。

1.2.2问题分析

这是一道传统的结构性数据挖掘题目,使用机器学习或深度学习等方法进行建模得到回归预测的结果。

思路如下:

  1. 由EDA(Exploratory Data Analysis)对数据进行探索,熟悉所给数据
  2. 由EDA的结果对样本特征进行特征工程
  3. 模型的训练
  4. 调整参数与模型融合
  5. 结果可视化与分析

1.2.3模型评价指标 M A E ( M e a n A b s o l u t e E r r o r ) MAE(Mean Absolute Error) MAE(MeanAbsoluteError)
M A E = 1 N ∑ i = 1 N ∣ y i − y ^ i ∣ MAE= \dfrac{1}{N} \sum_{i=1}^{N} \left| y_{i}- \hat y_{i} \right| MAE=N1i=1Nyiy^i

二、EDA的处理

1. pandas.DataFrame.select_dtypes 中对列名的筛选.

Parameter include,exculede(类似列表)
包含/排除dtype或字符串的列表。
必须为至少其中之一传递非空序列。
return DataFrame(源DF的一个子集)
raises
ValueError
- include,exculede都为空
- include,exculede包含重叠元素
- 传入任何的字符串dtype

**TypeError**
传入参数不是序列

2.EDA绘图经验

  1. 时序图 观察变量间的周期、振幅
  2. 直方图、密度曲线 观察变量的分布情况
  3. 多元图散点 观察变量间相关性
  4. 箱型图、小提琴图 观察数据异常

这篇关于二手车售价预测赛题理解与EDA的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/828656

相关文章

认识、理解、分类——acm之搜索

普通搜索方法有两种:1、广度优先搜索;2、深度优先搜索; 更多搜索方法: 3、双向广度优先搜索; 4、启发式搜索(包括A*算法等); 搜索通常会用到的知识点:状态压缩(位压缩,利用hash思想压缩)。

【生成模型系列(初级)】嵌入(Embedding)方程——自然语言处理的数学灵魂【通俗理解】

【通俗理解】嵌入(Embedding)方程——自然语言处理的数学灵魂 关键词提炼 #嵌入方程 #自然语言处理 #词向量 #机器学习 #神经网络 #向量空间模型 #Siri #Google翻译 #AlexNet 第一节:嵌入方程的类比与核心概念【尽可能通俗】 嵌入方程可以被看作是自然语言处理中的“翻译机”,它将文本中的单词或短语转换成计算机能够理解的数学形式,即向量。 正如翻译机将一种语言

【C++高阶】C++类型转换全攻略:深入理解并高效应用

📝个人主页🌹:Eternity._ ⏩收录专栏⏪:C++ “ 登神长阶 ” 🤡往期回顾🤡:C++ 智能指针 🌹🌹期待您的关注 🌹🌹 ❀C++的类型转换 📒1. C语言中的类型转换📚2. C++强制类型转换⛰️static_cast🌞reinterpret_cast⭐const_cast🍁dynamic_cast 📜3. C++强制类型转换的原因📝

深入理解RxJava:响应式编程的现代方式

在当今的软件开发世界中,异步编程和事件驱动的架构变得越来越重要。RxJava,作为响应式编程(Reactive Programming)的一个流行库,为Java和Android开发者提供了一种强大的方式来处理异步任务和事件流。本文将深入探讨RxJava的核心概念、优势以及如何在实际项目中应用它。 文章目录 💯 什么是RxJava?💯 响应式编程的优势💯 RxJava的核心概念

如何通俗理解注意力机制?

1、注意力机制(Attention Mechanism)是机器学习和深度学习中一种模拟人类注意力的方法,用于提高模型在处理大量信息时的效率和效果。通俗地理解,它就像是在一堆信息中找到最重要的部分,把注意力集中在这些关键点上,从而更好地完成任务。以下是几个简单的比喻来帮助理解注意力机制: 2、寻找重点:想象一下,你在阅读一篇文章的时候,有些段落特别重要,你会特别注意这些段落,反复阅读,而对其他部分

深入理解数据库的 4NF:多值依赖与消除数据异常

在数据库设计中, "范式" 是一个常常被提到的重要概念。许多初学者在学习数据库设计时,经常听到第一范式(1NF)、第二范式(2NF)、第三范式(3NF)以及 BCNF(Boyce-Codd范式)。这些范式都旨在通过消除数据冗余和异常来优化数据库结构。然而,当我们谈到 4NF(第四范式)时,事情变得更加复杂。本文将带你深入了解 多值依赖 和 4NF,帮助你在数据库设计中消除更高级别的异常。 什么是

分布式系统的个人理解小结

分布式系统:分的微小服务,以小而独立的业务为单位,形成子系统。 然后分布式系统中需要有统一的调用,形成大的聚合服务。 同时,微服务群,需要有交流(通讯,注册中心,同步,异步),有管理(监控,调度)。 对外服务,需要有控制的对外开发,安全网关。

Java IO 操作——个人理解

之前一直Java的IO操作一知半解。今天看到一个便文章觉得很有道理( 原文章),记录一下。 首先,理解Java的IO操作到底操作的什么内容,过程又是怎么样子。          数据来源的操作: 来源有文件,网络数据。使用File类和Sockets等。这里操作的是数据本身,1,0结构。    File file = new File("path");   字

理解java虚拟机内存收集

学习《深入理解Java虚拟机》时个人的理解笔记 1、为什么要去了解垃圾收集和内存回收技术? 当需要排查各种内存溢出、内存泄漏问题时,当垃圾收集成为系统达到更高并发量的瓶颈时,我们就必须对这些“自动化”的技术实施必要的监控和调节。 2、“哲学三问”内存收集 what?when?how? 那些内存需要回收?什么时候回收?如何回收? 这是一个整体的问题,确定了什么状态的内存可以

理解分类器(linear)为什么可以做语义方向的指导?(解纠缠)

Attribute Manipulation(属性编辑)、disentanglement(解纠缠)常用的两种做法:线性探针和PCA_disentanglement和alignment-CSDN博客 在解纠缠的过程中,有一种非常简单的方法来引导G向某个方向进行生成,然后我们通过向不同的方向进行行走,那么就会得到这个属性上的图像。那么你利用多个方向进行生成,便得到了各种方向的图像,每个方向对应了很多