python 3.5 对文件格式进行转换

最新推荐文章于 2025-06-30 17:38:28 发布

liangxiaoyuan92

最新推荐文章于 2025-06-30 17:38:28 发布

阅读量1k

点赞数 1

CC 4.0 BY-SA版权

文章标签： python 编码转换 utf-8 unicode

本文链接：https://blog.youkuaiyun.com/liangxiaoyuan92/article/details/54616213

本文介绍了一种通过Unicode作为中间格式来实现不同字符编码之间转换的方法。该方法适用于处理包含特殊字符或乱码的问题文件，确保文件内容能正确地从一种编码格式转换到另一种编码格式。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

思路如下：

对任意文件，使用Unicode码进行解码，然后再由Unicode转换为任意编码

可参考

http://blog.sina.com.cn/s/blog_6d7cf9e50102vo90.html

代码如下

# -*- coding: utf-8 -*-
"""
Created on Thu Jan 19 13:42:22 2017

@author: xiaoyuanl
"""
#以unicode为中枢进行转换

filename = 'foreigncitation'

fp = open(filename+".tsv",'rb')

out = open(filename+'_utf8.tsv','bw')

i=1
for content in fp:
result=content.decode('unicode-escape').encode('utf-8')
out.write(result)
if i%10000==0:
print(i)
i=i+1
fp.close()
out.flush()
out.close()
print("OK")

#re.sub("'"," ",line[i+1:jieduan+1+i]+"*#")