wx0628的博客

最近准备使用Python+Hadoop+Pandas进行一些深度的分析与机器学习相关工作。（当然随着学习过程的进展，现在准备使用Python+Spark+Hadoop这样一套体系来搭建后续的工作环境），当然这是后话。 但是这项工作首要条件就是将Python与Hadoop进行打通，本来认为很容易的一项工作，没有想到竟然遇到各种坑，花费了整整半天时间。后来也在网上看到大家在咨询相同的问题，但是真正解决...

对于Dataframe中同一列，如果有多个条件，则不能使用and运算符，需要使用&位运算符。示例如下： import pandas as pd df = pd.DataFrame({'name':['a','a','b','b'],'classes':[1,2,3,4],'price':[11,22,33,44]}) print(df[(df['price']>11) and (df...

1、根据值在是否在列表中进行切片： 使用isin方法可以根据DataFrame中的某列的值是否在某个列表中来进行切片（注意：这里不要直接使用in,否则会报错），代码如下： pf = pd.DataFrame([['74-27-EA-4D-93-BD','act_click','click_news',3],['E0-3F-49-79-C8-97','act_biz','click_hb.seb',...