linux纵向拼接两个csv并且只保留一个表头

原创已于 2025-02-04 10:44:53 修改 · 187 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#linux #python #算法 #数据结构

于 2025-02-04 10:38:21 首次发布

awk命令行工具
```
awk 'FNR==1 && NR!=1 {next} {print}' file1.csv file2.csv > merged.csv
```
FNR是当前文件的行号，NR是整个输入流的行号。FNR==1 && NR!=1 {next}——跳过除第一个文件以外的表头。file1.csv file2.csv——按顺序处理这两个文件。

python脚本

import pandas as pd

# 读取 CSV 文件
df1 = pd.read_csv('file1.csv')
df2 = pd.read_csv('file2.csv')

# 拼接并去重表头
merged = pd.concat([df1, df2])

# 保存结果
merged.to_csv('merged.csv', index=False)