python pandas读取csv、excel文件乱码

已于 2022-08-13 23:39:05 修改
阅读量2.3k 收藏 2
点赞数 1
CC 4.0 BY-SA版权
分类专栏： python 文章标签： pandas python 开发语言
于 2022-08-13 23:35:51 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/datadev_sh/article/details/126325858
本文介绍了解决从CSV文件读取数据时遇到的乱码问题的过程。通过确定正确的编码格式（utf-16），并使用适当的分隔符，最终成功地用Pandas库正确加载了数据。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

下载了一个csv表格，pandas读取了，打出来的是乱码。

df = pd.read_csv('11.csv')
df.head()

在这里插入图片描述
想着转换为Excel格式看看，是否就好了。就用wps打开，并另存为 .xls结尾的excel文件，使用还是乱码。

应该是编码问题，但是不知道咋解决，在读取时，设置为utf-8也没用。

就想到用记事本软件打开看看是啥格式。用sublime打开那个csv，按ctrl+S（保存该文件），在sublime下方出现了一条提示，看到了这个文件的格式，是utf-16.
在这里插入图片描述

然后加上编码就可以读取了。虽然这个是csv文件，但是看到只有一列，值中间还有、

df = pd.read_csv('11.csv', encoding='utf16', sep='\t')
df.head()
pandas读取excel出现乱码问题解决
zlhcsm的博客
02-13 1万+
文章目录问题描述问题解决参考链接 问题描述 读取excel，却出现了如下错误。 u'1.G1P0\u5b5539+6\u5468LOA\u5355\u6d3b\u80ce\u987a\u4ea72.\u598a\u5a20\u671f\u7cd6\u5c3f\u75c53\u3001\u4f1a\u9634I\u5ea6\u88c2\u4f244. 问题解决 终归还是编码的问题。主要起作用的是先...
如何解决用pandas读取数据库中的表格的乱码问题
weixin_49096826的博客
03-02 1553
数据库是sybase,读取时，中文列出现乱码，解决如下： sybase_engine = create_engine(f"sybase+pyodbc://dba:sql@sybase_second") tab = pd.read_sql_query("SELECT * FROM product", sybase_engine) tab = tab.apply(lambda x: x.astype(str).str.encode('cp850').str.decode('gbk')) print(tab)
初学python，利用pandas读取excel出现乱码的问题
zlsjune123的博客
11-26 1万+
初学python，利用pandas读取excel出现乱码的问题 初学python，利用pandas读取excel文件时，出现中文乱码： 左侧出现中文乱码 解决过程： 初始判断是是pandas读取中文出现问题，度娘以下解决方案（截图自：https://blog.youkuaiyun.com/winter_python/article/details/52954957） 可能是解决方案之一，但并没有解决我的问题 ...
手把手教你解决Python文件读取乱码这个磨人精
最新发布
2509_91142605的博客
03-27 592
作为一个在数据清洗坑里摸爬滚打五年的程序员，我敢说文件编码问题绝对能排进「最让人抓狂的Bug」前三名。上周刚帮实习生小刘解决了客户发来的订单文件乱码问题，今天就把实战经验掰开揉碎讲明白。上周客户发来的Excel导出文件显示是ANSI编码，其实就是GBK的马甲。昨天下午三点，小刘急匆匆跑来找我："哥，我用pandas读CSV文件报错了！这种报错就像开盲盒——可能是中文路径，可能是文件里有特殊符号，最头疼的就是编码问题。编码问题就像编程界的灰指甲——不致命但烦人。
【疑难杂症】pandas将dataframe导出为csv文件，用excel打开出现乱码字符/有多余列/行数不对
a61022706的博客
06-20 2733
使用pandas导出csv文件后用excel打开，出现乱码，列数也增加了。但是在pandas中读取csv文件，dataframe中显示正常。
Pandas输出文件使用Excel打开时中文出现乱码的解决方法
xylbill97的博客
11-23 3174
Pandas输出文件使用Excel打开时中文出现乱码的解决方法
Python Pandas 读取CSV文件 写入CSV文件 中文乱码问题
klmyty的博客
01-09 6060
Pandas 读取、写入CSV文件 中文乱码问题
Python之pandas读写文件乱码的解决方法
12-23
在pandas中读写csv时候通过制定encoding可以有效防止excel打开或者写入中文乱码 data.to_csv(f_out,index=False,encoding='gb2312') 以上这篇Python之pandas读写文件乱码的解决方法就是小编分享给大家的全部内容了...
python读取csv文件
qq_22464799的博客
11-24 1万+
由于工作需要，需要用python提取csv文件中内容，这篇文章主要是记录下用pandas读取csv文件内容的一些简单的操作，适合python初学者。
csv逗号分隔符转换_pythonpandas读写csv数据
weixin_39733232的博客
11-14 2421
官方介绍：pandas的官方手册：https://pandas.pydata.org/pandas-docs/stable/pandas官方读写数据文档：https://pandas.pydata.org/pandas-docs/stable/user_guide/io.html一、使用pandas读取和写入csv文件pandas.read_csv()语法：1、使用pandas读取csv...
python pandas处理csv表格（筛选，去重，分割，删除）
sakura_ting的博客
09-29 1万+
pandas处理csv读取文件筛选查找值所在行的索引根据索引删除行去重拆分写入csv总结： 前言： 本人没学过pandas，不过最近总处理一些csv文件，从网上查用法，总是忘记，所以今天记录一下这些常用的用法，以后再补pandas，写的很简陋，还请大家海涵，有不足的还请大佬指教 读取文件 import pandas as pd data = pd.read_csv(文件, encoding='编码') 筛选 单列 value = data['列名'] 多列 value = data[['列名1', '列
快速解决pandas.read_csv()乱码的问题
09-20
今天小编就为大家分享一篇快速解决pandas.read_csv()乱码的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
python 中文乱码-解决Python2.7读写文件中的中文乱码问题
weixin_37988176的博客
10-29 1310
Python2.7对于中文编码的问题处理的并不好，这几天在爬数据的时候经常会遇到中文的编码问题。但是本人对编码原理不了解，也没时间深究其中的原理。在此仅从应用的角度做一下总结，1.设置默认编码在Python代码中的任何地方出现中文，编译时都会报错，这时可以在代码的首行添加相应说明,明确utf-8编码格式，可以解决一般情况下的中文报错。当然，编程中遇到具体问题还需具体分析啦。#encoding:ut...
python pandas导出excel到本地的时候出现乱码
屯庆的博客
10-25 5190
直接加上编码 self.df = pandas.DataFrame(self.headers, index=[0]) self.df.to_excel(self.filename, index=False, encoding='utf-8')
Python读取Excel文件遇到的编码问题（pycharm）
热门推荐
qq_36449202的博客
05-16 1万+
1.读取中文文件名，出现错误 2.控制台输出中文乱码 3.decode和encode 4.UnicodeDecodeError: 'utf8' codec can't decode bytes in position 0-1: invalid data错误
python 读取excel文件 - 编码是个头疼的问题
BigDeng_2014的专栏
08-28 7344
问题： 如何将设计好的用例思维导图落地到RF中？ 解决方案： 采用xmind生成了一个思维导图的图形 将该图形拷贝到excel表格中 读取该excel表，输出utf-8格式的txt，供robotframework调用 讨论： 1、没有考虑子层级不同的情况。 2、没有解决python读取excel时遇到的切换目录 、 创建txt文件时的 名称编码 问题。 3、面对复杂的，大量的用例
python读excel乱码_Python读写excel练习_去除excel中乱码行，并添加列
weixin_39932692的博客
11-21 226
需求：把app_student.xls里面的数据，1、如果这一行数据里面有乱码(及包含?)，那么就删掉2、再加上一列，是否毕业3、如果班级是天蝎座的话，毕业这一列写成毕业4、其他班级的写成未毕业原始数据：实现：importxlrd,xlwtEXCEL_NAME= ‘app_student.xls‘def delete_messy_code(excel_name): #删除乱码book =xlrd....
pandas读取csv文件乱码
03-11
### 解决Pandas读取CSV文件时的编码问题 当使用 `pandas` 的 `read_csv()` 函数读取 CSV 文件时，可能会遇到编码错误。常见的编码选项如 `'utf-8'` 或者 `'gbk'` 可能无法正常工作并抛出异常[^1]。 为了处理这种情况，可以尝试不同的编码格式来找到适合当前文件的那个。通常情况下，以下几种方法可以帮助解决问题： #### 尝试多种编码格式 ```python import pandas as pd try: df = pd.read_csv('yourfile.csv', encoding='utf-8') except UnicodeDecodeError: try: df = pd.read_csv('yourfile.csv', encoding='gbk') except Exception as e: print(f"Failed with error {e}") ``` 如果上述两种常见编码都不适用，则可能需要进一步调查源文件的实际编码类型。可以通过工具或库（比如 chardet）检测未知文件的具体编码形式[^3]。 #### 使用chardet探测编码 安装 `chardet` 库之后，可以用它来猜测文件的编码： ```bash pip install chardet ``` 然后编写如下代码片段来进行编码识别： ```python import chardet with open('yourfile.csv', 'rb') as file: raw_data = file.read() result = chardet.detect(raw_data) encoding_detected = result['encoding'] print("Detected Encoding:", encoding_detected) df = pd.read_csv('yourfile.csv', encoding=encoding_detected) ``` 这种方法能够更可靠地确定正确的字符集设置，从而避免因不匹配而产生的乱码现象[^5]。 另外，在某些特殊场景下，即使指定了正确的编码参数仍然会出现解析失败的情况。这时应该考虑是否存在 BOM (Byte Order Mark)，这是一些文本编辑器会在 UTF 编码文档开头写入的一个标记字节序列。对于带有BOM标志位的UTF-8文件，可以在调用`read_csv()`函数时指定额外的关键字参数`engine='python'`以绕过C引擎中的潜在缺陷[^2]。 最后值得注意的是，确保所使用的 Python 版本及其依赖项是最新的版本也很重要，因为旧版可能存在已知漏洞或者兼容性问题[^4]。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值