dataframe添加元素指定为列表,不同for循环命名空间下的变量重复问题

本文介绍了一种使用Python处理超过内存限制的大数据集的方法。通过将数据分割成更小的部分,可以有效地进行数据处理和分析,这对于大数据处理非常关键。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

split=pd.DataFrame({'data':[0],'len':0,'count':0},index=[0])
for i_t in range(over_128.shape[0]):
      ct=over_128['count'].iloc[i_t]
      for i_per in range(ct):
        print(i_t)
        if i_per<ct-1:
          part=over_128.iloc[i_t, 0][i_per * 128:(i_per + 1) * 128]
          per=pd.DataFrame({'data':[part],'len':0,'count':0},index=[0])
          split=split.append(per)
        elif i_per==ct-1:
            tail=over_128.iloc[i_t, 0][i_per * 128:]
            per_= pd.DataFrame({'data':[tail] , 'len': 0,'count':0},
                               index=[0])
            split = split.append(per_)

要是元素为列表那么在 原来的基础上在外面再加一层list
if else 不同命名空间下最好变量名最好不要重复


 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值