pandas
关注
分享
扫一扫
onemorepoint
mysql、python、JavaScript、vue 学习中
展开
-
pandas过滤某列含有nan 的行
pandas中 过滤某列中含有Nan的行原创 2022-06-23 10:32:49 · 3758 阅读 · 0 评论 -
对应pandas中dataframe的多列进行apply方法
对应pandas中dataframe的多列进行apply方法原创 2022-06-01 21:57:58 · 490 阅读 · 0 评论 -
pandas 实现sql row number 功能
1. pandas 实现sql row number 功能padans链接：https://pandas.pydata.org/pandas-docs/stable/getting_started/comparison/comparison_with_sql.html原创 2021-04-27 22:20:57 · 1614 阅读 · 0 评论 -
pandas pivot_table或者groupby实现sql 中的count distinct 功能
pandas pivot_table或者groupby实现sql 中的count distinct 功能 pandas pivot_table或者groupby实现sql 中的count distinct 功能import pandas as pdimport numpy as npdata = pd.read_csv('活跃买家分析初稿.csv')...原创 2019-03-28 11:47:00 · 7480 阅读 · 0 评论 -
pandas功能使用rename, reindex, set_index 详解
pandas功能使用rename, reindex, set_index 详解 pandas rename 功能在使用 pandas 的过程中经常会用到修改列名称的问题，会用到 rename 或者 reindex 等功能，每次都需要去查文档当然经常也可以使用 df.columns重新赋值为某个列表用 rename 则可以轻松应对 pandas 中修改...原创 2019-02-23 22:51:00 · 8684 阅读 · 0 评论 -
pandas pivot_table 活学活用实例教程
pandas pivot_table 活学活用实例教程 pandas pivot_table 活学活用实例教程导入相关数据分析的库首先进行commentTime时间进行数据预处理查看数据类型信息最简单的透视表直接敲击该函数，在notebook中可以查看该函数的参数多个索引列特定列的统计规定特定的聚合函数传入多个聚合函数传入colum...原创 2018-08-20 23:51:00 · 654 阅读 · 0 评论 -
pandas.DataFrame对行和列求和及添加新行和列
pandas.DataFrame对行和列求和及添加新行和列 pandas.DataFrame对行和列求和及添加新行和列导入模块：from pandas import DataFrameimport pandas as pdimport numpy as np生成DataFrame数据df = DataFrame(np.random.ran...原创 2018-08-27 13:49:00 · 9643 阅读 · 0 评论 -
pandas 数据预处理
pandas 数据预处理 pandas 数据预处理缺失数据处理csv_data='''A,B,C,D1.0,2.0,3.0,4.05.6,6.0,,8.00.0,11.0,12.0,,'''import pandas as pdfrom io import StringIOdf = pd.read_csv(StringIO(csv_dat...原创 2018-06-25 14:10:00 · 270 阅读 · 0 评论 -
pandas 中的DataFrame.where()使用
pandas 中的DataFrame.where()使用 pandas.DataFrame.whereDataFrame.where(cond, other=nan, inplace=False, axis=None, level=None, try_cast=False, raise_on_error=True)inplace : boolean, d...原创 2018-05-28 11:35:00 · 13534 阅读 · 0 评论 -
python 10分钟入门pandas
python 10分钟入门pandas 本文是对pandas官方网站上《10 Minutes to pandas》的一个简单的翻译，原文在这里。这篇文章是对pandas的一个简单的介绍，详细的介绍请参考：Cookbook 。习惯上，我们会按下面格式引入所需要的包：一、 创建对象可以通过 Data Structure Intro S...原创 2017-09-23 20:59:00 · 289 阅读 · 0 评论 -
pandas 处理文本数据
pandas 处理文本数据 import pandas as pdimport numpy as np常规的字符串操作s = pd.Series(['A',"B","C","AaBa","Baca",np.nan,'dog','cat'])s0 A1 B2 C3 AaBa4 Baca5 ...原创 2018-12-11 23:42:00 · 1007 阅读 · 0 评论 -
pandas 基础
pandas 基础 创建一个Series ，同时让pandas自动生成索引列创建一个DataFrame数据框查看数据数据的简单统计数据的排序选择数据（类似于数据库中sql语句）另外可以使用标签来选择通过位置获取数据布尔值索引设定数值（类似于sql update 或者add）缺失值处理数据操作统计个数与离散化import ...原创 2018-11-18 21:48:00 · 189 阅读 · 0 评论 -
pandas category数据类型
pandas category数据类型 实际应用pandas过程中，经常会用到category数据类型，通常以string的形式显示，包括颜色（红，绿，蓝），尺寸的大小（大，中，小），还有地理信息等（国家，省份），这些数据的处理经常会有各种各样的问题，pandas以及scikit-learn两个包可以将category数据转化为合适的数值型格式，这篇主要介...原创 2018-08-02 15:53:00 · 12805 阅读 · 0 评论 -
python pandas 豆瓣电影 top250 数据分析
python pandas 豆瓣电影 top250 数据分析 豆瓣电影top250数据分析数据来源（豆瓣电影top250）爬虫代码比较简单数据较为真实，可以进行初步的数据分析可以将前面的几篇文章中的介绍的数据预处理的方法进行实践最后用matplotlib与pyecharts两种可视化包进行部分数据展示数据仍需深挖，有待加强#首先按照惯例导入...原创 2018-08-08 15:07:00 · 5512 阅读 · 0 评论 -
pandas replace 替换功能function
pandas replace 替换功能function list like replace methoddict like replace methodregex expressionimport pandas as pdimport numpy as nps = pd.Series([0,1,2,3,4])s.replace(0,5...原创 2018-12-22 15:22:00 · 3591 阅读 · 0 评论 -
pandas 数据类型转换
pandas 数据类型转换 数据处理过程的数据类型当利用pandas进行数据处理的时候，经常会遇到数据类型的问题，当拿到数据的时候，首先需要确定拿到的是正确类型的数据，一般通过数据类型的转化，这篇文章就介绍pandas里面的数据类型（data types也就是常用的dtyps），以及pandas与numpy之间的数据对应关系。主要介绍object，i...原创 2018-08-02 00:14:00 · 4866 阅读 · 0 评论 -
pandas numpy处理缺失值，none与nan比较
pandas numpy处理缺失值，none与nan比较 原文链接：https://junjiecai.github.io/posts/2016/Oct/20/none_vs_nan/建议从这里下载这篇文章对应的.ipynb文件和相关资源。这样你就能在Jupyter中边阅读，边测试文中的代码。python原生的None和pandas, numpy中的nu...原创 2018-04-28 11:51:00 · 4019 阅读 · 0 评论 -
Pandas透视表（pivot_table）详解
Pandas透视表（pivot_table）详解 介绍也许大多数人都有在Excel中使用数据透视表的经历，其实Pandas也提供了一个类似的功能，名为pivot_table。虽然pivot_table非常有用，但是我发现为了格式化输出我所需要的内容，经常需要记住它的使用语法。所以，本文将重点解释pandas中的函数pivot_table，并教大家如何使用它...原创 2018-02-07 10:05:00 · 1290 阅读 · 0 评论 -
pandas常用
pandas常用 #python中的pandas库主要有DataFrame和Series类(面向对象的的语言更愿意叫类) DataFrame也就是#数据框(主要是借鉴R里面的data.frame)，Series也就是序列 ，pandas底层是c写的 性能很棒，有大神#做过测试 处理亿级别的数据没问题，起性能可以跟同等配置的sas媲美#DataFrame索引...原创 2017-12-28 15:19:00 · 138 阅读 · 0 评论 -
用 Scikit-Learn 和 Pandas 学习线性回归
用 Scikit-Learn 和 Pandas 学习线性回归 对于想深入了解线性回归的童鞋，这里给出一个完整的例子，详细学完这个例子，对用scikit-learn来运行线性回归，评估模型不会有什么问题了。from https://www.cnblogs.com/pinard/p/6016029.html1. 获取数据，定义问题没有数据，当然没法研究机...原创 2017-10-09 18:10:00 · 185 阅读 · 0 评论 -
pandas处理日期时间，按照时间筛选
pandas处理日期时间，按照时间筛选 pandas有着强大的日期数据处理功能，本期我们来了解下pandas处理日期数据的一些基本功能，主要包括以下三个方面：按日期筛选数据按日期显示数据按日期统计数据运行环境为 windows系统，64位，python3.5。1 读取并整理数据首先引入pandas库import pandas as pd...原创 2017-09-20 17:35:00 · 40249 阅读 · 1 评论 -
利用python设计PDF报告，jinja2，whtmltopdf，matplotlib，pandas
利用python设计PDF报告，jinja2，whtmltopdf，matplotlib，pandas 转自：https://foofish.net/python-crawler-html2pdf.html工具准备弄清楚了网站的基本结构后就可以开始准备爬虫所依赖的工具包了。requests、beautifulsoup 是爬虫两大神器，reuqests...原创 2017-08-29 17:50:00 · 616 阅读 · 0 评论 -
Python数据分析之pandas学习
Python数据分析之pandas学习 Python中的pandas模块进行数据分析接下来pandas介绍中将学习到如下8块内容：1、数据结构简介：DataFrame和Series2、数据索引index3、利用pandas查询数据4、利用pandas的DataFrames进行统计分析5、利用pandas实现SQL操作6、利用pandas进行缺失值的处理...原创 2017-04-21 16:44:00 · 354 阅读 · 0 评论 -
kaggle house price top 10%
kaggle 竞赛入门对于刚刚入门机器学习的的同学来说，kaggle竞赛通常是他们学习和跟其他的全世界范围内的参赛选手切磋的一个大的平台，这个平台上提供了一些入门的竞赛，可以供刚入门的同学一展拳脚本文针对房价预测的这个竞赛展开，从EDA，特征工程，到模型调参开始讲述一些竞赛中的小的trick，希望对大家有些帮助,本人基础一般，如果有贻笑大方的地方，可以随意拍砖from IPyth...翻译 2019-07-24 10:21:59 · 1210 阅读 · 0 评论 -
pandas 基础操作 更新
pandas 基础操作 更新创建一个Series,同时让pandas自动生成索引列 创建一个DataFrame数据框 查看数据 数据的简单统计 数据的排序 选择数据（类似于数据库中sql语句） 另外可以使用标签来选择 通过位置获取数据 布尔值索引 设定数值（类似于sql update 或者add） 缺失值处理 数据操作 统计个数与离散化 pandas 处...原创 2018-12-09 20:42:00 · 4839 阅读 · 1 评论 -
pandas数据预处理
pandas 数据预处理缺失数据处理csv_data='''A,B,C,D1.0,2.0,3.0,4.05.6,6.0,,8.00.0,11.0,12.0,,'''import pandas as pdfrom io import StringIOdf = pd.read_csv(StringIO(csv_data))print(df) A B C...原创 2018-06-25 15:02:11 · 245 阅读 · 0 评论