二手车交易价格赛题及数据初步分析

零基础入门数据挖掘——二手车交易价格预测 零基础入门数据挖掘——二手车交易价格预测 一、 赛题理解 Tip:此部分为零基础入门数据挖掘的 Task1 赛题理解 部分,为大家入门数据挖掘比赛提供一个基本的赛题入门讲解,欢迎后续大家多多交流。 赛题:零基础入门数据挖掘 - 二手车交易价格预测 地址:https://tianchi.aliyun.com/competition/entrance/231784/introduction?spm=5176.12281957.1004.1.38b02448ausjSX 1.1 学习目标 1)理解赛题数据和目标, 阅读详情

二手车交易价格预测数据初步分析

赛题分析

训练集共有15万条数据,测试集A有5万条。包含31个变量,Index([‘SaleID’, ‘name’, ‘regDate’, ‘model’, ‘brand’, ‘bodyType’, ‘fuelType’,‘gearbox’, ‘power’, ‘kilometer’, ‘regionCode’, ‘seller’, ‘offerType’,‘creatDate’, ‘price’, ‘v_0’, ‘v_1’, ‘v_2’, ‘v_3’, ‘v_4’, ‘v_5’, ‘v_6’,‘v_7’, ‘v_8’, ‘v_9’, ‘v_10’, ‘v_11’, ‘v_12’, ‘v_13’, ‘v_14’],dtype=‘object’)
各变量注释如下:
name - 汽车编码
regDate - 汽车注册时间
model - 车型编码
brand - 品牌
bodyType - 车身类型
fuelType - 燃油类型
gearbox - 变速箱
power - 汽车功率
kilometer - 汽车行驶公里
notRepairedDamage - 汽车有尚未修复的损坏
regionCode - 看车地区编码
seller - 销售方
offerType - 报价类型
creatDate - 广告发布时间
price - 汽车价格
v_0’, ‘v_1’, ‘v_2’, ‘v_3’, ‘v_4’, ‘v_5’, ‘v_6’, ‘v_7’, ‘v_8’, ‘v_9’, ‘v_10’, ‘v_11’, ‘v_12’, ‘v_13’,‘v_14’(根据汽车的评论、标签等大量信息得到的embedding向量)【人工构造 匿名特征】

一般经验来看,二手车的价格受影响最大的应该是车的品牌,行驶公里数,汽车注册时间,和汽车损坏程度。因此,特征选择上可以结合此类经验。此赛题是典型的回归问题,可以采用boosting,stacking等集成方法,非线性回归,深度融合等方法,关键在于数据特征分析(是否高度相关,有无缺失值),特征选择,异常值处理,缺失值处理,以及思考如何构建准确的模型并优化参数,对于外推性上性能如何评价。

数据分析

用python分析150000条数据,运用了数据导入,数据简要分析,数据统计信息浏览
数据导入:运用pandas

Train_data = pd.read_csv('datalab/used_car_train_20200313.csv', sep=' ');

数据简要分析:通过 .info() 简要可以看到对应一些数据列名,以及NAN缺失信息

Train_data.info()

得到dtypes: float64(20), int64(10), object(1)

TestA_data.info()

得到dtypes: float64(20), int64(9), object(1)
数据统计信息浏览:通过 .describe() 可以查看数值特征列的一些统计信息

Train_data.describe()
TestA_data.describe()

在这里插入图片描述
得到数据的count个数,mean,min,max
疑问:25%,50%,75%不知道什么意思,类似于中位数的意思?且中间省略号的数据如何让看到?

天池二手车交易价格预测Task2-赛题理解与数据探索性分析(EDA) 一、赛题理解 1.1赛题概述 赛题以预测二手车的交易价格为任务,数据集报名后可见并可下载,该数据来自某交易平台的二手车交易记录,总数据量超过40w,包含31列变量信息,其中15列为匿名变量。为了保证比赛的公平性,将会从中抽取15万条作为训练集,5万条作为测试集A,5万条作为测试集B,同时会对name、model、brand和regionCode等信息进行脱敏。 通过这道赛题来引导大家走进 AI 数... 阅读详情

相关推荐

【二手车交易价格预测】赛题理解

一、赛题背景 本次新人赛是Datawhale与天池联合发起的0基础入门系列赛事第一场 —— 零基础入门数据挖掘之二手车交易价格预测大赛。 赛题以二手车市场为背景,要求选手预测二手汽车的交易价格,这是一个典型的回归问题。通过这道赛题来引导大家走进AI数据竞赛的世界,主要针对于于竞赛新人进行自我练习、自我提高。 应搞清楚三个问题: (1)这个赛题是什么业务问题: 本次大赛是Datawhale与天池联...

oyall520的博客 1580

二手车交易价格预测代码全解析(一)背景介绍与数据集加载

背景介绍 这两天开始研究天池上面的数据挖掘入门比赛:二手车交易价格预测。本来觉得是一个比较简单的项目吧,套用一下keras解决波士顿房价回归预测的模型,写一个简单的神经网络把数据输入进去,就可以了。 因此我一直以为深度学习的基本步骤是: (1)数据准备 (2)模型选择&模型开发 (3)模型评估(evaluate) (4)模型预测 (5)模型调优(调参) 万万没想到啊,这个二手车交易价格预测,要想预测得准确,就要优化基本的机器学习方法。个人觉得和深度学习比起来,机器学习太难了,难在他底层全都是数学。整

zoubaihan的博客 3330

Datawhale &天池二手车交易价格预测— Task1 赛题理解 +Task2 数据分析

二手车交易价格预测— Task1 赛题理解 +Task2 数据分析 文章目录: 1 赛题理解 二手车交易价格预测是Datawhale与天池联合发起的0基础入门系列赛事第一场 —— 零基础入门数据挖掘之二手车交易价格预测大赛。 1.1 比赛目的 赛题以二手车市场为背景,要求选手预测二手汽车的交易价格,这是一个典型的回归问题。通过这道赛题来引导大家走进AI数据竞赛的世界,主要针对于于竞赛新人进行自我...

chutu2018的博客 1688

Datawhale 数据挖掘入门:数据分析 笔记

TASK2:数据分析 摘自 AI蜗牛车 在Datawhale 数据挖掘入门:数据分析部分的讲义 赛题:零基础入门数据挖掘 - 二手车交易价格预测 地址:https://tianchi.aliyun.com/competition/entrance/231784/introduction?spm=5176.12281957.1004.1.38b02448ausjSX 1 主要的内容 载入各种数据...

blexsantos的博客 1284

【我的数据挖掘竞赛之旅(二)】二手车交易价格预测——2020年天池阿里云竞赛Task1赛题理解

Datawhale 零基础入门数据挖掘-Task1 赛题理解 文章目录Datawhale 零基础入门数据挖掘-Task1 赛题理解一、 赛题理解1.1 学习目标1.2 了解赛题1.2.1 赛题概况1.2.2 数据概况1.2.3 预测指标分类算法常见的评估指标如下:对于回归预测类常见的评估指标如下:1.2.4. 分析赛题1.3 代码示例1.3.1 数据读取pandas1.3.2 分类指标评价计算示例...

汪雯琦的博客 1737

零基础入门数据挖掘 - 二手车交易价格预测 赛题理解和EDA

这个是DataWhale在本次数据挖掘竞赛提供的学习思路图。

beautiful_well的博客 1314

【竞赛项目详解】二手车交易价格预测(附源码)

文章目录1 项目简介2 项目分析2.1 数据分析(EDA)2.2 难点分析2.3 可行性方案分析3 方案设计3.1 特征工程3.2 模型构建与训练4 结果分析5 源码链接 1 项目简介 赛题以预测二手车的交易价格为任务,数据来自某交易平台的二手车交易记录,总数据量超过40w,包含31列变量信息,其中15列为匿名变量。从中抽取15万条作为训练集,5万条作为测试集,同时对name、model、brand和regionCode等信息进行脱敏。评价标准为MAE。详情请看天池。 特征表如下所示。 2 项目分析 2.

小陈说CV的博客 1万+

【天池学习笔记】二手车交易价格预测

1.赛题理解 1.1背景 赛题以预测二手车的交易价格为任务,数据集报名后可见并可下载,该数据来自某交易平台的二手车交易记录,总数据量超过40w,包含31列变量信息,其中15列为匿名变量。为了保证比赛的公平性,将会从中抽取15万条作为训练集,5万条作为测试集A,5万条作为测试集B,同时会对name、model、brand和regionCode等信息进行脱敏。 回归问题,属于传统数据挖掘,不适用神经网络 回归问题用机器学习,主要注意构建特征和选择模型 比赛主要应用xgb、lgb、catboost 价

i6223671的博客 5417

二手车交易价格预测|Task2 EDA-数据探索性分析

Task2 数据分析-核心内容介绍: EDA(Exploratory Data Analysis): 是指对已有的数据(特别是调查或观察得来的原始数据)在尽量少的先验假定下进行探索,通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。 Flowchart流程图: Created with Raphaël 2.2.0载入库和数据,粗略观察数据:head(),shap...

佛莫dj的博客 561

【数据挖掘】 基于二手车交易价格预测-赛题分析

数据挖掘前我们要去熟悉数据,了解变量间的相互关系以及变量与预测值之间的存在关系,借助可视化工具帮助我们更好的进行分析。 pandas matplotlib sklearn 正太分布 1. 赛题背景 赛题以二手车市场为背景,要求选手预测二手汽车的交易价格,这是一个典型的回归问题。 2. 赛题数据 赛题以预测二手车的交易价格为任务,数据集报名后可见并可下载,该数据来自某交易平台的二手车交易记录,总数据量超过40w,包含31列变量信息,其中15列为匿名变量。 为了保证比赛的

2056

二手车交易数据集-数据集

Datawhale-零基础入门数据挖掘 - 二手车交易价格预测-- 赛题理解与数据分析(EDA)

这里写自定义目录标题Datawhale-零基础入门数据挖掘 - 二手车交易价格预测-- 赛题理解与数据分析(EDA)一、赛题理解二、数据探索性分析(EDA)2.1 介绍(摘自AI蜗牛车的Task2 数据分析)2.2 本次比赛EDA过程的思维导图 Datawhale-零基础入门数据挖掘 - 二手车交易价格预测-- 赛题理解与数据分析(EDA) 一、赛题理解 这里转载自杨煜队伍的分享的思维导图: 二...

weixin_44104450的博客 540

华为昇腾Atlas200DK. CANN模型推理——目标检测结果不对(无检测结果)的问题解决

目录前言问题描述问题排查1.后处理模块问题排查2.预处理模块问题排查3.模型问题排查4.算法bug问题排查5.AI板卡问题排查6.模型精度问题排查6.模型推理问题解决:模型输入数据与预处理不同后记 前言 上周我在华为昇腾Atlas200DK中部署nanodet和yolov5时,出现了目标检测结果不对(没有检测到任何物体),困扰了整整三天,最后找到原因并圆满解决,在这里记录一下debug过程。 以上测试均在python中完成。 问题描述 第一天上午,我首先将nanodet由pytorch的.pth模型转换为.

qq_41035283的博客 5604

二手车价格预测task01:赛题理解和baseline实现

task01进行了完成了赛题的理解和bsaeline的实现,通过对数据的简单分析,以及用所有的数据在没有任何处理的情况下通过LGB和XGB将得到的结果进行提交得分379.5001,目前排名64。下一步会进行数据分析和特征工程,对数据做进一步的处理来提高训练和测试的效果。第一次参加比赛,通过后续学习争取排到第一页.[滑稽] 赛题理解 1.赛题概况 比赛要求参赛选手根据给定的数据集,建立模型,二手汽车的交易价格。 赛题以预测二手车的交易价格为任务,数据集报名后可见并可下载,该数据来自某交易平台的二手车交易记录,

DDxuexi的博客 630

Zabbix-获取客户端的SNMP数据

网口状态(ifOperStatus)的 OID 是1.3.6.1.2.1.2.2.1.8,查询时需要用1.3.6.1.2.1.2.2.1.8.1(第 1 个网口)、1.3.6.1.2.1.2.2.1.8.2(第 2 个网口)等。表格对象是指 “包含多个同类实例的对象”(如设备的多个网口、多个进程等,每个实例需要单独标识)。在 SNMP 规范中,标量对象的完整 OID 必须以.0结尾,.0是标量对象的唯一实例编号。标量对象是指 “单一值的对象”(如设备的名称、温度、状态等,整个设备只需要一个值来表示)。

徐子元 1733

手把手教你为ArduPilot添加自定义飞行模式:以自动巡检航线为例

本文详细介绍了如何为开源飞控ArduPilot添加自定义飞行模式,并以自动巡检航线为例,提供了从状态机设计、代码实现到地面站集成的完整开发指南。通过七步法手把手教学,帮助开发者深入理解飞控核心逻辑,实现无人机自主执行复杂巡检任务,满足行业应用定制需求。

weixin_29306875的博客 138

DW组队学习-二手车交易价格预测

DataWhale组队学习 -#### 数据挖掘 - 二手车交易价格预测 任务 目标:价格预测 -> price 数据来源:某交易平台的二手车交易记录 数据量:总数据量超过40w,包含31列变量信息,其中15列为匿名变量,从中抽取15万条作为训练集,5万条作为测试集A,5万条作为测试集B 数据处理:已对name、model、brand和regionCode等信息进行脱敏。 ...

sliceoflife的博客 313

YOLOv11改进策略【独家融合改进】| MobileNetV4+BiFPN,轻松实现降参涨点,适用专栏内所有的骨干替换

可扩展的高效物体检测BiFPN(加权双向特征金字塔网络)

Limiiiing的博客 2362

EDA-数据探索性分析

赛题:零基础入门数据挖掘 - 二手车交易价格预测 EDA的目标 熟悉数据集,了解数据集,数据表达了什么 数据挖掘结构 初步分离出一些重要特征 挖掘离群数据和异常数据 初步确定可以用的模型 绘图方法 时序图(变化规律) 直方图(分布) 密度曲线(分布) 箱型图(查看数据异常情况)(不同数据间分布的对比) 小提琴图(进阶版的箱型图)(某个值附近的概率分布) 量化方法 相关性分析 独立性分析 ...

teacoffeetea 327

全志平台camera驱动开发(3)MIPI接口camera驱动开发

详细沟通: 请加video_D 目前开发过的allwinner平台: V5/V3/V3S/V40/T3/T7/A64等 开发过的mipi sensor: sony:imx317、imx477、imx274、imx258、imx286、imx307、imx385等 ov:ov2718、ov12895、ov2710等 ar: ar0238等 国产:gc1024、gc1034...

jzwjzw19900922的博客 9030

DSP2837X CLA开发实战教程

摘要: 本文详细解析TI C2000 DSP中CLA协处理器的开发流程,以TMS320F28377D的cla_divide案例为例,展示浮点除法验证的实现方法。从基础配置(消息RAM管理、任务触发)到高级调试(ePWM计时、断点设置),涵盖全流程开发要点。重点分析CLA编程约束(禁用标准库、数学优化)、多任务调度及常见问题解决方案(如死锁、数据同步)。提供FPGA协同加速、电机控制等扩展方向,并推荐官方例程与硬件平台(如创龙TL2837xF-EVM)。开发时需注意.cla文件语法支持及调试技巧,以充分发挥C

6763

天池二手车交易价格预测— 赛题理解 + 数据分析

天池二手车交易价格预测— 赛题理解 + 数据分析1、 赛题理解1.1 学习目标1.2 了解赛题1.2.1 赛题概况1.2.2 数据概况1.2.3 预测指标分类算法常见的评估指标如下:对于回归预测类常见的评估指标如下:1.2.4. 分析赛题2、数据分析2.1 导入相关函数工具箱2.2 读取数据2.3 数据浏览2.4 相关字符对应含义2.5 观察数据概况2.6 判断数据缺失—查看每列的存在nan情况...

weixin_37388706的博客 4457

衍射光学元件(DOE):结构光3D感知的“编码器”与核心硬件基石

结构光3D传感技术中,衍射光学元件(DOE)是关键核心部件,它通过微纳结构对激光相位进行精密调制,将点光源编码为高对比度的结构光图案。DOE决定了系统的编码能力、能量效率和集成度,其制造涉及半导体级光刻、精密镀膜等高门槛工艺,目前全球仅少数企业具备量产能力。随着3D感知在消费电子、自动驾驶等领域的广泛应用,DOE作为结构光方案的基础硬件,其技术壁垒和战略价值日益凸显。

Fun_LiDAR的博客 247

第一次认真的二手车交易价格预测--赛题分析

二手车交易价格预测--赛题分析数据比赛步骤一. 赛题分析1.1 学习目标1.2 了解赛题1.2.1 赛题概况1.2.2 数据概况train.csv1.2.3 预测指标一般问题评价指标说明:1.2.4 分析赛题1.3代码解读1.3.1 导入函数工具箱1.3.2 数据读取1.4经验借鉴 数据比赛步骤 1.赛题分析 2. 数据分析 3. 特征工程 4. 建模调参 5. 模型融合 一. 赛题分析 1.1 ...

yalipf的博客 2642

37、基于铁电场效应晶体管(FeFET)的片上深度神经网络(DNN)直接反馈对齐训练

本文提出了一种基于铁电场效应晶体管(FeFET)的深度神经网络(DNN)训练加速器架构,结合直接反馈对齐(DFA)算法和FeFET的独特物理特性,以解决当前DNN训练中反向传播(BP)算法带来的高计算开销、复杂数据依赖和高能耗问题。通过设计基于FeFET的MVM引擎、低功耗ADC和随机数生成器(RNG),该架构在速度和功率效率方面相比现有基于ReRAM的加速器分别提升了1.3倍和2.5倍。研究为未来高效能AI训练硬件的发展提供了新的思路和实现路径。

wine的专栏 166

jdk-8u144-linux-x64.tar.gz.

该资源为搭建Linux系统Java环境用,资源的后缀为tar.gz格式的压缩包

sklearn之线性回归实现—阿里云天池二手车交易价格预测赛

最近整理了线性回归的原理及代码实现,想要用实际数据来测试模型,正好看到阿里云天池数据赛正在进行二手车交易价格预测算法赛,正好能用线性回归模型进行预测,就在这里分享一下代码。 一、赛题介绍 赛题以预测二手车的交易价格为任务,该数据来自某交易平台的二手车交易记录,总数据量超过40w,包含31列变量信息,其中15列为匿名变量。其中抽取15万条作为训练集,5万条作为测试集A,5万条作为测试集B。 特征如下...

weixin_42347070的博客 4143

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

下一篇: 二手车交易价格预测:EDA-数据探索性分析
Simone_future
博客等级 码龄7年 0粉丝 21原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值