pyarrow能够快速处理大数据。并且与pandas兼容
可以在定义pandas数据的同时添加dtype参数,将其值设为pyarrow类型
如:ser = pd.Series([-1.5, 0.2, None], dtype="float32[pyarrow]")
1.要将 pyarrow.Table转换为dataframe,采用pyarrow.Table.to_pandas()方法,参数也要一致:
table = pa.table([pa.array([1, 2, 3], type=pa.int64

最低0.47元/天 解锁文章
8412

被折叠的 条评论
为什么被折叠?



