成功的利用pandas库进行表格数据筛选后合并

原创于 2018-11-13 14:58:12 发布 · 1.2k 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#python #pandas #数据分析

风电数据分析专栏收录该内容

1 篇文章

订阅专栏

本文详细介绍了使用Python的Pandas库进行数据筛选、合并及处理的全过程，通过具体实例展示了如何从多个CSV文件中读取数据，筛选特定行并合并为单一数据集，最后将处理后的数据保存为新的CSV文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

——————————————————————————————————————————————————————————————————————

成功的利用pandas库进行表格数据筛选后合并

import csv
import os
import numpy as np
import pandas as pd
import matplotlib
import matplotlib.pyplot as plt
def not_empty(s):
   return s and s.strip()
#os.chdir("E:/fdtq76")#目标目录
path="E:/fdtq76"
allfile=[]
def getallfile(path):
   allfilelist=os.listdir(path)
   for file in allfilelist:
      filepath=os.path.join(path,file)
      allfile.append(filepath)
   return allfile
Data=[]
def read(files):
   #i=len(files)
   i=0
   for item in files:
      if i<len(files):
         data = pd.DataFrame(pd.read_csv(item))
         #print(type(data))
         data=data.iloc[0:144,:]
         #print(data)
         Data.insert(i,data)
         i+=1
      else:
         print(len(Data))
   result=pd.concat(Data)
   print(result)
   return result
files=getallfile(path)
f=read(files)
print(type(f))
pd.DataFrame(f).to_csv('E:/abc.csv')