刚才说的有问题，新的说法应该是按照GA_D82DD83D_00-00-08_QAC.xlsx的sheet：warn中第二行的列名Source，Line #，Level，Warn #，Message与warn.csv中第一行的列名：File，Line ，Grp，Nbr，Description进行一一对应，将warn.csv中的内容复制到GA_D82DD83D_00-00-08_QAC.xlsx的sheet：warn中，另外winmerge还是没有生成报告，以下是日志：==================================================
开始文件比较...
报告文件路径: e:\system\Desktop\项目所需文件\工具\ffff\temp\winmerge_diff_report.txt
正在比较目录: E:\system\Desktop\项目所需文件\工具\ffff\code\old\GA_D82DD83D_00-00-07\mainline\spa_traveo\src 和 E:\system\Desktop\项目所需文件\工具\ffff\code\new\GA_D82DD83D_00-00-08\mainline\spa_traveo\src
执行命令: "E:/App/WinMerge/WinMerge/WinMergeU.exe" /u /r /nl /noprefs /noninteractive /report="e:\system\Desktop\项目所需文件\工具\ffff\temp\winmerge_diff_report.txt" "E:\system\Desktop\项目所需文件\工具\ffff\code\old\GA_D82DD83D_00-00-07\mainline\spa_traveo\src" "E:\system\Desktop\项目所需文件\工具\ffff\code\new\GA_D82DD83D_00-00-08\mainline\spa_traveo\src"
WinMerge退出代码: 0
警告: WinMerge未生成报告文件 e:\system\Desktop\项目所需文件\工具\ffff\temp\winmerge_diff_report.txt
找到 0 个变更文件
==================================================
更新Excel表格...
开始更新Excel: E:\system\Desktop\项目所需文件\工具\ffff\GA_D24D_00-00-01(三回目)_QAC.xlsx
发现现有Excel文件: E:\system\Desktop\项目所需文件\工具\ffff\GA_D24D_00-00-01(三回目)_QAC.xlsx
成功加载现有Excel文件
=== 功能1: 写入文件差分表 ===
已将 0 个变更文件路径写入'ファイル差分'工作表
=== 功能2: 复制func_met.csv到_org_fm工作表 ===
已将func_met.csv内容(4137行)复制到'_org_fm'工作表
=== 功能3: 处理warn.csv并添加变更标记 ===
已处理 1000 行警告数据...
已处理 2000 行警告数据...
已处理 3000 行警告数据...
已处理 4000 行警告数据...
已处理 5000 行警告数据...
已处理 6000 行警告数据...
已处理 7000 行警告数据...
已处理 8000 行警告数据...
已处理 9000 行警告数据...
已处理 10000 行警告数据...
已处理 11000 行警告数据...
已处理 12000 行警告数据...
已处理 13000 行警告数据...
已处理 14000 行警告数据...
已处理 15000 行警告数据...
已将warn.csv内容(15471行)复制到'warn'工作表，并添加变更标记
成功保存Excel: E:\system\Desktop\项目所需文件\工具\ffff\GA_D24D_00-00-01(三回目)_QAC.xlsx
处理完成! 输出文件: E:\system\Desktop\项目所需文件\工具\ffff\GA_D24D_00-00-01(三回目)_QAC.xlsx
==================================================
程序结束
以下是代码：import os
import re
import subprocess
import pandas as pd
from openpyxl import load_workbook, Workbook
from openpyxl.utils.dataframe import dataframe_to_rows
import difflib
import sys
import io
import time
import shutil
from pathlib import Path
# 设置系统标准输出为UTF-8
sys.stdout = io.TextIOWrapper(sys.stdout.buffer, encoding='utf-8', errors='replace')
sys.stderr = io.TextIOWrapper(sys.stderr.buffer, encoding='utf-8', errors='replace')
def get_changed_files_and_lines(old_dir, new_dir, winmerge_path):
"""使用WinMerge获取变更文件列表及具体变更行号"""
# 创建临时目录存放报告
temp_dir = os.path.join(os.path.dirname(__file__), "temp")
os.makedirs(temp_dir, exist_ok=True)
report_file = os.path.join(temp_dir, "winmerge_diff_report.txt")
print(f"报告文件路径: {report_file}")
# 移除路径结尾的反斜杠
old_dir = old_dir.rstrip('\\')
new_dir = new_dir.rstrip('\\')
print(f"正在比较目录: {old_dir} 和 {new_dir}")
# 更新WinMerge命令参数
cmd = [
f'"{winmerge_path}"',
'/u', # 使用Unicode
'/r', # 递归比较子目录
'/nl', # 不比较行尾差异
'/noprefs', # 不加载GUI偏好设置
'/noninteractive', # 非交互模式
f'/report="{report_file}"', # 官方推荐的报告参数
f'"{old_dir}"',
f'"{new_dir}"'
]
full_cmd = ' '.join(cmd)
print(f"执行命令: {full_cmd}")
changed_files = {}
try:
# 运行WinMerge
result = subprocess.run(
full_cmd,
shell=True,
timeout=600, # 10分钟超时
)
# 检查WinMerge退出代码 (0=相同, 1=有差异, >1=错误)
print(f"WinMerge退出代码: {result.returncode}")
# 检查报告文件是否生成且有内容
if not os.path.exists(report_file):
print(f"警告: WinMerge未生成报告文件 {report_file}")
return changed_files
file_size = os.path.getsize(report_file)
if file_size == 0:
print(f"警告: 报告文件为空")
return changed_files
print(f"报告文件大小: {file_size} 字节")
# 尝试读取报告文件
report_content = ""
try:
with open(report_file, 'r', encoding='utf-16') as f:
report_content = f.read()
print(f"成功读取报告文件（UTF-16）")
except UnicodeError:
try:
with open(report_file, 'r', encoding='utf-8') as f:
report_content = f.read()
print(f"成功读取报告文件（UTF-8）")
except Exception as e:
print(f"读取报告文件失败: {e}")
return changed_files
# 提取所有差异文件
diff_files = set()
# 增强的正则表达式
patterns = [
re.compile(r'文件\s+["\']?(.+?)["\']?\s+和\s+["\']?(.+?)["\']?\s+不同'), # 中文格式
re.compile(r'Files\s+["\']?(.+?)["\']?\s+and\s+["\']?(.+?)["\']?\s+differ'), # 英文格式
re.compile(r'Comparing\s+["\']?(.+?)["\']?\s+and\s+["\']?(.+?)["\']?'),
re.compile(r'File\s+["\']?(.+?)["\']?\s+and\s+["\']?(.+?)["\']?\s+are different')
]
for line in report_content.splitlines():
matched = False
for pattern in patterns:
match = pattern.search(line)
if match:
# 提取新版本文件路径
new_file = match.group(2).strip()
# 规范化路径
new_file = os.path.normpath(new_file)
print(f"识别到差异文件: {new_file}")
diff_files.add(new_file)
matched = True
break
if not matched and ("不同" in line or "differ" in line or "different" in line or "Comparing" in line):
print(f"[未匹配行] {line}")
print(f"发现 {len(diff_files)} 个差异文件")
# 获取变更行号
for file_path in diff_files:
# 构建旧文件路径
rel_path = os.path.relpath(file_path, new_dir)
old_file_path = os.path.join(old_dir, rel_path)
# 检查文件是否存在
if not os.path.isfile(old_file_path):
print(f"旧文件不存在: {old_file_path}")
continue
if not os.path.isfile(file_path):
print(f"新文件不存在: {file_path}")
continue
# 比较文件内容差异
changed_lines = set()
try:
print(f"比较文件: {old_file_path} vs {file_path}")
with open(old_file_path, 'r', encoding='utf-8', errors='ignore') as f_old:
content_old = f_old.readlines()
with open(file_path, 'r', encoding='utf-8', errors='ignore') as f_new:
content_new = f_new.readlines()
diff = difflib.unified_diff(
content_old,
content_new,
fromfile=old_file_path,
tofile=file_path,
n=0 # 不显示上下文
)
for line_diff in diff:
if line_diff.startswith('@@'):
# 提取变更行号
match_diff = re.search(r'\+(\d+)(?:,(\d+))?', line_diff)
if match_diff:
start_line = int(match_diff.group(1))
line_count = int(match_diff.group(2)) if match_diff.group(2) else 1
changed_lines.update(range(start_line, start_line + line_count))
except Exception as e:
print(f"错误比较文件 {old_file_path} 和 {file_path}: {str(e)}")
# 使用相对路径作为键
changed_files[rel_path] = changed_lines
print(f"变更文件: {rel_path} - {len(changed_lines)} 行变更")
except subprocess.TimeoutExpired:
print("WinMerge执行超时，强制终止")
except Exception as e:
print(f"处理报告文件时出错: {str(e)}")
import traceback
traceback.print_exc()
finally:
# 确保清理临时文件
if os.path.exists(report_file):
try:
os.remove(report_file)
print("已清理临时报告文件")
except Exception as e:
print(f"无法删除临时文件: {e}")
return changed_files
def detect_encoding(file_path):
"""检测文件编码"""
# 常见编码类型列表（可根据需要扩展）
encodings = ['utf-8', 'shift_jis', 'cp932', 'latin1', 'iso-8859-1', 'euc-jp']
for encoding in encodings:
try:
with open(file_path, 'r', encoding=encoding) as f:
f.read(1024) # 仅读取部分内容测试
return encoding
except UnicodeDecodeError:
continue
return 'utf-8' # 默认使用utf-8
def update_excel_sheets(csv_folder, output_excel, changed_files):
"""更新Excel表格实现三个主要功能"""
try:
print(f"开始更新Excel: {output_excel}")
# 加载或创建Excel文件
if os.path.exists(output_excel):
print(f"发现现有Excel文件: {output_excel}")
try:
wb = load_workbook(output_excel)
print("成功加载现有Excel文件")
except Exception as e:
print(f"加载Excel失败: {e}，将创建新文件")
# 备份策略
timestamp = time.strftime("%Y%m%d_%H%M%S")
backup_name = f"{output_excel}.bak_{timestamp}"
try:
shutil.copy2(output_excel, backup_name)
print(f"已将损坏文件备份至: {backup_name}")
except Exception as backup_error:
print(f"备份文件时出错: {backup_error}")
wb = Workbook()
else:
print("创建新的Excel文件")
wb = Workbook()
# 创建所需的工作表
wb.create_sheet("ファイル差分")
wb.create_sheet("_org_fm")
wb.create_sheet("warn")
# 功能1: 将变更文件路径写入"ファイル差分"工作表
print("\n=== 功能1: 写入文件差分表 ===")
if "ファイル差分" not in wb.sheetnames:
wb.create_sheet("ファイル差分")
print("创建'ファイル差分'工作表")
ws_diff = wb["ファイル差分"]
ws_diff.delete_rows(1, ws_diff.max_row) # 清除现有内容
ws_diff.append(["文件路径"]) # 添加列标题
# 写入所有变更文件路径
for file_path in changed_files.keys():
ws_diff.append([file_path])
print(f"已将 {len(changed_files)} 个变更文件路径写入'ファイル差分'工作表")
# 功能2: 复制func_met.csv到_org_fm工作表
print("\n=== 功能2: 复制func_met.csv到_org_fm工作表 ===")
func_met_path = os.path.join(csv_folder, "func_met.csv")
if not os.path.exists(func_met_path):
print(f"警告: 未找到func_met.csv文件 - {func_met_path}")
else:
if "_org_fm" not in wb.sheetnames:
wb.create_sheet("_org_fm")
print("创建'_org_fm'工作表")
ws_fm = wb["_org_fm"]
ws_fm.delete_rows(1, ws_fm.max_row) # 清除现有内容
# 读取CSV文件
encoding = detect_encoding(func_met_path)
df_fm = pd.read_csv(func_met_path, encoding=encoding)
# 写入列标题
ws_fm.append(list(df_fm.columns))
# 写入数据行
for _, row in df_fm.iterrows():
ws_fm.append(list(row))
print(f"已将func_met.csv内容({len(df_fm)}行)复制到'_org_fm'工作表")
# 功能3: 处理warn.csv并添加变更标记
print("\n=== 功能3: 处理warn.csv并添加变更标记 ===")
warn_path = os.path.join(csv_folder, "warn.csv")
if not os.path.exists(warn_path):
print(f"警告: 未找到warn.csv文件 - {warn_path}")
else:
if "warn" not in wb.sheetnames:
wb.create_sheet("warn")
print("创建'warn'工作表")
ws_warn = wb["warn"]
ws_warn.delete_rows(1, ws_warn.max_row) # 清除现有内容
# 读取CSV文件
encoding = detect_encoding(warn_path)
df_warn = pd.read_csv(warn_path, encoding=encoding)
# 添加WarnFilter(变更有无)列
df_warn['WarnFilter(变更有无)'] = 'No'
# 列名映射
column_mapping = {
'File': 'Source',
'Line': 'Line #',
'Grp': 'Level',
'Nbr': 'Warn #',
'Description': 'Message'
}
# 重命名列
df_warn.rename(columns=column_mapping, inplace=True)
# 写入列标题
headers = list(df_warn.columns)
headers.append('WarnFilter(变更有无)') # 确保新列在最后
ws_warn.append(headers)
# 处理每一行
for index, row in df_warn.iterrows():
source = str(row['Source'])
if not source or pd.isna(source):
# 源文件为空，直接标记为No
row_data = list(row)
row_data.append('No')
ws_warn.append(row_data)
continue
# 从源路径中提取文件名
filename = Path(source).name
# 检查是否在变更文件中
found = False
changed_line = None
try:
line_num = int(row['Line #'])
except (ValueError, TypeError):
line_num = None
# 在变更文件列表中查找
for file_path, changed_lines in changed_files.items():
if Path(file_path).name == filename and line_num is not None:
if line_num in changed_lines:
changed_line = line_num
found = True
break
# 设置变更标记
warn_filter = 'Yes' if found else 'No'
# 准备行数据
row_data = list(row)
row_data.append(warn_filter)
ws_warn.append(row_data)
# 每处理1000行打印一次进度
if (index + 1) % 1000 == 0:
print(f"已处理 {index + 1} 行警告数据...")
print(f"已将warn.csv内容({len(df_warn)}行)复制到'warn'工作表，并添加变更标记")
# 保存Excel
wb.save(output_excel)
print(f"成功保存Excel: {output_excel}")
return True
except Exception as e:
print(f"更新Excel出错: {str(e)}")
import traceback
traceback.print_exc()
return False
def main():
# 配置路径（根据实际情况修改）
old_code_dir = r"E:\system\Desktop\项目所需文件\工具\ffff\code\old\GA_D82DD83D_00-00-07\mainline\spa_traveo\src"
new_code_dir = r"E:\system\Desktop\项目所需文件\工具\ffff\code\new\GA_D82DD83D_00-00-08\mainline\spa_traveo\src"
csv_folder = r"E:\system\Desktop\项目所需文件\工具\ffff\APL\Tool出力結果"
output_excel = r"E:\system\Desktop\项目所需文件\工具\ffff\GA_D24D_00-00-01(三回目)_QAC.xlsx"
winmerge_path = r"E:/App/WinMerge/WinMerge/WinMergeU.exe"
print("="*50)
print("开始文件比较...")
try:
changed_files = get_changed_files_and_lines(old_code_dir, new_code_dir, winmerge_path)
print(f"找到 {len(changed_files)} 个变更文件")
print("="*50)
print("更新Excel表格...")
success = update_excel_sheets(csv_folder, output_excel, changed_files)
if success:
print(f"处理完成! 输出文件: {output_excel}")
else:
print("处理失败，请检查错误日志")
except Exception as e:
print(f"处理过程中发生错误: {str(e)}")
import traceback
traceback.print_exc()
print("="*50)
print("程序结束")
if __name__ == "__main__":
main()
扫一扫
4380
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
