Python打开文本文件的编码报错

最新推荐文章于 2024-11-19 12:33:45 发布
原创 最新推荐文章于 2024-11-19 12:33:45 发布 · 1.3k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#编码 #UTF-8

本文介绍了一个常见的Python编程问题，当使用numpy的genfromtxt函数读取文本文件时遇到UnicodeDecodeError。详细记录了尝试解决此问题的过程，包括修改PyCharm和Notepad++的编码设置，最终通过在函数调用中明确指定encoding参数为'utf-8'成功解决了错误。
部署运行你感兴趣的模型镜像

Python中用numpy的 gefromtxt 打开一个文本，出现如下错误：

File "D:\NewPython\venv\lib\site-packages\numpy\lib\npyio.py", line 1786, in genfromtxt
    first_line = _decode_line(next(fhd), encoding)
UnicodeDecodeError: 'gbk' codec can't decode byte 0x98 in position 14: illegal multibyte sequence

做了几个操作，包括：

1、将pycharm右下角的GBK 变成 UTF-8----没用！

2、在notepad++ 里面将文本文档转化成UTF-8编码之后 再运行代码-----没用！

最后的解决办法为在genfromtxt里加上  encoding='utf-8'，即：

gongdan = np.genfromtxt('gd.txt',dtype=str,delimiter='，',encoding='utf-8')

解决！

您可能感兴趣的与本文相关的镜像

Python3.8

Python3.8

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

处理Python中文文本文件读取的UnicodeDecodeError问题
持续更新
06-03 865
然而，在处理包含中文字符的文本文件时，可能会出现UnicodeDecodeError的解码错误。为了解决这个问题，我们可以使用二进制方式读取文件，并指定正确的编码方式进行解码。在上面的代码中，我们首先以二进制的方式读取文件，并将文件内容存储在变量content中。需要注意的是，我们在解码的过程中需要确定文件使用的编码方式。在上面的示例代码中，我们假设文件以UTF-8编码方式保存。如果文件使用的是其他编码方式，例如GBK或者GB2312，我们需要相应地调整代码中的编码方式参数。
numpy.genfromtxt(......)读取文件出现错误 ValueError: Some## 标题 errors were detected ! Line #2 (got 3 co
weixin_44357285的博客
08-17 6054
numpy.genfromtxt(…)读取文件出现错误 ValueError: Some## 标题 errors were detected ! Line #2 (got 3 columns instead of 4) Line #3 (got 3 columns instead of 4) … Traceback (most recent call last): File “”, line 1, in File “…” 报错图如下 原语句为year=numpy.genfromtxt(‘C:/User
【Python】安装第三方包老是报错
winrh的博客
11-28 3191
又是 You are using pip version 10.0.1, however version 19.3.1 is available. You should consider upgrading via the 'python -m pip install --upgrade pip' command. 又是 Traceback (most recent call last)...
itChat使用Python3.9 异常
flysh05的专栏
07-30 863
显示错误信息： utils.msg_formatter(m, 'Content') File "D:\envPython\lib\site-packages\itchat\utils.py", line 69, in msg_formatter d[k] = htmlParser.unescape(d[k]) AttributeError: 'HTMLParser' object has no attribute 'unescape' 网上的解决方式很多，没有一个真正解决问题了，最...
使用scipy.genfromtxt()报错
weixin_30852367的博客
03-07 195
错误代码： Traceback (most recent call last): File "D:/Python27/1400OS_01_Codes/code/sp_genfromtxt.py", line 3, in <module> data=sp.genfromtxt("web_traffic.tsv",delimiter="\t") File "D:\Python2...
python中numpy模块genfromtxt读取.csv文件报错提示找不到文件问题
weixin_44868665的博客
11-12 3221
刚开始学机器学习小白一枚，今天用genfromtxt函数读取.csv文件一直报错，一晚上终于解决，发现是一个很智障的问题，估计应该没人遇到。 电脑上没有.csv文件，我就自己写了一个，后来发现这玩意是不能直接写的，要用open()，write()函数生成一个文件。 小白自学真是太南了。 import numpy as np f = open('test1.csv', 'w') f.write("...
python中open文本写入字符串时编码报错问题
12-22
console报错信息：UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\u2022’ in position 7636: illegal multibyte sequence 字面上的意思是字符串中存在’gbk’无法编码的情况。原因分析要么是open...
python能打开的txt文件编码_python 读取txt文件编码处理
weixin_39831567的博客
12-24 1417
python 读txt文件的时候，经常遇到编码报错的问题。处理文本读取，首先要确定文件的编码方式，然后通过指定encoding类别的方式读取文件，遇到无法解析的字符，可以通过指定未识别字符的处理方式处理。1.识别文件编码通过chardet 返回文件的编码类型，未识别的类型返回Noneimport chardet# 获取文件编码类型def get_encoding(file):# 二进制方式读取，获...
python读写文本老是报错？codecs模块统一编码 一行代码搞定py字符读写
py_xiaoyong的博客
10-17 612
在python程序中，经常要用到字符文本的读和写。用py自带的 读read写write，定义字符编码比较麻烦。 而用第三方 codecs 模块，在读写字符文本时，可以指定字符编码，就好用很多。 下面，我用 codecs 模块，自己编写了一个def函数。调用读写函数，指定数据，可以用一行代码实现字符文本的读写功能。只读写 字符文本！ 分享构建codecs读写函数的思路：1.读2.写---->>方便读写时，编码一致，就不会报错 读：1）读的标识，2）文件路径，3）文件名，4）读的方式，5...
python文件操作出现的有关编码的问题
xiaoCCD的博客
11-19 1009
所以，gb18030和unicode+utf-8是不同的字符表示方式，一个是中国制定的标准，一个是国际组织制定的标准。的解码（Decode）出现错误（Error）了，以gbk编码的方式去解码（该字符串变成Unicode），但是此处通过gbk的方式，却无法解码（can’t decode ）。utf-8: 它是一种通用的全世界各种语言的编码，如果你的网站或文本包括多个国家的语言，那么建议选择utf-8编码。对于gbk编码格式，虽然它的功能少，仅限于中文字符，所以它占用的空间比较小，打开网页的速度比较快。
Python 转换文本编码实现解析
01-01
来打开csv文本，但是实际使用过程中发现有些csv文本并不是utf-8格式，从而导致程序在run的过程中报错，每次都需要手动去把该文本文件的编码格式修改成utf-8，再次来run该程序，所以想说：直接在程序中判断并修改文本...
python3中Numpy的genfromtxt问题
诺坎普奇迹的博客
01-24 4570
根据官方文档举例 使用python3运行发现报错 TypeError: Can't convert 'bytes' object to str implicitly查询得知，python2与py3不兼容原因import numpy as np from io import BytesIO a = '1,2,3\n4,5,6\7,8,9' data = np.genfromtxt(BytesI
numpy.genfromtxt读取本地文件
allan2222的博客
08-12 8472
bd = np.genfromtxt('F:/beijing/final.csv', encoding='utf-8', dtype='U75', delimiter=',', skip_header=1) print(bd[:, 0:2]) dtype转换数据类型，关键字设置为'U75'， 不设置dtype，输出数据类型为nan delimiter=','表示数据由逗号分隔 skip_he...
Python配置虚拟环境---使用venv
m0_69483514的博客
08-30 8785
python -m venv +虚拟环境名称 ：python -m venv。是python3.3之后嵌入在标准库内的，可以直接在终端调用。python -m venv -h：查看venv工具参数。在该路径下可以进行后续pip操作 引入新的第三方库。进入虚拟环境：前面会有带虚拟环境名的括号（）选择解释器python.exe路径。进入Scripts目录调用。
NumPy包含中文的文本文件读取报错解决方案
qq_40493754的博客
01-19 1320
'gbk' codec can't decode byte 0xab in position 23: illegal multibyte sequence解决方案
python 报错：ModuleNotFoundError: No module named ‘openpyxl‘，安装openpyxl后还是报错解决方法。
hajiaojh的博客
08-10 2万+
版本: PyCharm Community Edition 2021.1.1 x64 ,python3.9. import pandas as pd data = pd.DataFrame([[1, 2], [3, 4], [5, 6]], columns=['A列', 'B列']) data.to_excel(r'd:\444.xlsx') 执行时报错，内容如下： Traceback (most recent call last): File "D:\Python\练习\python让EXEC...
Numpy_05_文件的读取与存储
baidu_41805096的博客
09-20 795
一、文件的读取 1、np.genfromtxt(): 可读取csv、txt类型文件 ''' np.genfromtxt(frame,skip_header,dtype,usecols,encoding=,delimiter=None) 常用参数说明： frame：带路径或不带路径的文件 skip_header：指定从第几行开始读取文件（通常skip_header = 1，跳过第一行的列名，从第二行开始读取） dtype：指定读取出来存储的数据类型 usecols：（list）指定需要读取的列（指定列的索引
Numpy文件存取
热门推荐
sherryllll
05-24 4万+
Numpy能够读写磁盘上的文本数据或二进制数据。将数组以二进制格式保存到磁盘np.load和np.save是读写磁盘数组数据的两个主要函数，默认情况下，数组是以未压缩的原始二进制格式保存在扩展名为.npy的文件中。>>> import numpy as np A = np.arange(15).reshape(3,5) >>> A array([[ 0, 1, 2, 3, 4],
python报错UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte，文本乱码解决方法
weixin_42473703的博客
01-24 4万+
这个异常报错是由于设置了参数errors默认为严格（strict）造成的，将其更改为ignore等即可。方法一：在参数中添加上encoding=‘gbk’ 或 encoding=‘utf-8’ ， 以及设置errors参数为errors=‘ignore’经测试发现笔者这里两种编码格式输出的文本内容均是乱码，证明我们要打开的文本不是gbk或utf-8编码格式。安装docx库：pip install python-docx。方法二：用笔记本打开另存为utf-8格式。方法三：使用docx库。
CLIP文本编码器报错
最新发布
02-25
### CLIP 文本编码器常见错误及其解决方案 #### 生成结果与提示词无关 当发现生成的结果完全偏离预期的提示词时，这可能是由于CLIP节点未正确连接到大模型所致。具体表现为Checkpoint节点的CLIP输出未能成功接入...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值