信创之国产浪潮电脑+linux统信UOS操作系统体验6:Python中文处理报错 (unicode error) ‘utf-8‘ codec can‘t decode及中文字符集处理

统信UOS对Python开发环境支持 对Python开发环境的全面支持,为开发者提供无缝的编写体验,实现快速搭建、调试和部署应用。 阅读详情
☞ ░ 前往老猿Python博客 ░ https://blog.youkuaiyun.com/LaoYuanPython

一、引言

在《信创之国产浪潮电脑+统信UOS操作系统体验4:visual studio code中怎么显示中文》介绍了在vscode编辑器中怎么正常显示中文,最近老猿在vscode中编辑Python文件,在编辑器中正常显示中文,但执行时报错的问题,可见字符集确实是国产化操作系统、linux系统+vscode编辑并执行含中文字符处理的一个关键问题,下面来整体介绍一下相关情况。

二、问题产生过程及解决办法

  1. 在vscode中新建一个hello.py文件

文件内容如下:

print("hello,world!")
print("你好!")
  1. 在终端中执行指令python ./hello.py
    在终端中执行指令python ./hello.py,报错如下:
SyntaxError: Non-UTF-8 code starting with '\xc4' in file ./hello.py on line 3, 
but no encoding declared; see http://python.org/dev/peps/pep-0263/ for details

截图如下:
在这里插入图片描述
3. 调整代码中的字符集声明为utf-8
在代码第一行增加# -*- coding: utf-8 -*-,再在终端中执行,报错信息变为:

SyntaxError: (unicode error) 'utf-8' codec can't decode byte 0xc4 in position 0: invalid continuation byte

将代码第一行字符集改为GBK,全代码如下:

# -*- coding: GBK -*-

print("hello,world!")
print("你好!")

执行正常执行,如此可以确认是代码文件的字符集与文件中声明的字符集不匹配导致。从vscode的状态栏右下角可以看到字符集为GBK,如上图绿色箭头所示,也就是代码文件是GBK字符集的,那么在带中的声明必须与此匹配。

三、系统化的解决办法

上面出现问题到解决,是在python文件中声明字符集类型来解决的,但有时由于项目要求必须以特定字符集如UTF-8来执行,上述解决办法行不通,最好的办法就是项目要求的字符集和文件的字符集在开始时就保持一致,这要区分新建文件和存量文件来进行不同的处理。

3.1、新建文件

在vscode中,可以通过《信创之国产浪潮电脑+统信UOS操作系统体验4:visual studio code中怎么显示中文》介绍的首选项设置字符集方法,将新建文档的字符集指定为特定字符集,下图是设置为GBK字符集:
在这里插入图片描述
可以将其设置改为UTF-8:
在这里插入图片描述
如果不是vscode的编辑器,则保存文件的字符集需要不同的方式来设置,下图是统信操作下图自带文本编辑器的设置方法(文件保存时设置字符集):
在这里插入图片描述

3.2、存量文件字符集的变更

如果已有一个存量文件的字符集如GBK,要变更成另一个字符集,则需要另外的方法。

3.2.1、查看文件的字符集

可以通过vscode打开文件查看字符集,也可以通过linux的file -i指令查看文件的字符集信息,例如:
在这里插入图片描述
可以看到hello.py字符集是iso-8859-1,但是在vscode内打开变成了GBK字符集,应该是vscode自动做了转换,具体机制老猿还没研究清楚。

3.2.2、转换文件的字符集

转换字符集有个方法:

  1. 新建一个文件,将要转换文件的内容直接拷贝到新的文件中,然后将新文件以目标字符集方式保存,具体可以参考前面介绍的新建文件字符集设定方法;
  2. 用linux指令iconv,指令格式为:iconv -f 源文件字符集 -t 目标文件字符集 源文件名 > 目标文件名,但这个方法使用上需要注意源文件字符集的取值,具体看下面的案例。
3.2.3、用iconv指令转换文件字符集的案例

用上面介绍的hello.py这个文本文件,可以看到在vscode中显示字符集为GBK,在file -i指令中显示为iso-8859-1,那么转换用哪个字符集呢?我们实际验证一下:

  1. 用iso-8859-1字符集进行转换:iconv -f iso-8859-1 -t UTF-8 hello.py >h.py,转换后打开文件,相关截图如下:
    在这里插入图片描述
    可以看到是乱码。
  2. 用GBK字符集进行转换:iconv -f GBK -t UTF-8 hello.py >h.py,转换后打开文件,相关截图如下:
    在这里插入图片描述
    显示是正常的,因此以vscode显示字符集进行转换才是对的,但注意上面的文件内容第一行的GBK同时要调整为UTF-8,否则执行时会存在乱码输出。

小结

本文介绍了一个在统信linux操作系统UOS下执行Python文件输出中文报错的案例,从查看文件字符集编码、新建文件设定字符集、python文件声明字符集以及存量文件调整文件字符集编码的角度比较全面的介绍了问题产生的原因、解决办法,代码文件的字符集与文件中声明的字符集不匹配是导致这个问题的根源,解决办法就是通过调整文件字符集、py文件声明文件字符集保持一致。

写博不易,敬请支持:

如果阅读本文于您有所获,敬请点赞、评论、收藏,谢谢大家的支持!

更多关于信创之国产浪潮电脑+统信UOS操作系统体验的内容请参考专栏《国产信创之光》的其他文章。

关于老猿的付费专栏

  1. 付费专栏《https://blog.youkuaiyun.com/laoyuanpython/category_9607725.html 使用PyQt开发图形界面Python应用》专门介绍基于Python的PyQt图形界面开发基础教程,对应文章目录为《 https://blog.youkuaiyun.com/LaoYuanPython/article/details/107580932 使用PyQt开发图形界面Python应用专栏目录》;
  2. 付费专栏《https://blog.youkuaiyun.com/laoyuanpython/category_10232926.html moviepy音视频开发专栏 )详细介绍moviepy音视频剪辑合成处理的类相关方法及使用相关方法进行相关剪辑合成场景的处理,对应文章目录为《https://blog.youkuaiyun.com/LaoYuanPython/article/details/107574583 moviepy音视频开发专栏文章目录》;
  3. 付费专栏《https://blog.youkuaiyun.com/laoyuanpython/category_10581071.html OpenCV-Python初学者疑难问题集》为《https://blog.youkuaiyun.com/laoyuanpython/category_9979286.html OpenCV-Python图形图像处理 》的伴生专栏,是笔者对OpenCV-Python图形图像处理学习中遇到的一些问题个人感悟的整合,相关资料基本上都是老猿反复研究的成果,有助于OpenCV-Python初学者比较深入地理解OpenCV,对应文章目录为《https://blog.youkuaiyun.com/LaoYuanPython/article/details/109713407 OpenCV-Python初学者疑难问题集专栏目录 》
  4. 付费专栏《https://blog.youkuaiyun.com/laoyuanpython/category_10762553.html Python爬虫入门 》站在一个互联网前端开发小白的角度介绍爬虫开发应知应会内容,包括爬虫入门的基础知识,以及爬取优快云文章信息、博主信息、给文章点赞、评论等实战内容。

前两个专栏都适合有一定Python基础但无相关知识的小白读者学习,第三个专栏请大家结合《https://blog.youkuaiyun.com/laoyuanpython/category_9979286.html OpenCV-Python图形图像处理 》的学习使用。

对于缺乏Python基础的同仁,可以通过老猿的免费专栏《https://blog.youkuaiyun.com/laoyuanpython/category_9831699.html 专栏:Python基础教程目录)从零开始学习Python。

如果有兴趣也愿意支持老猿的读者,欢迎购买付费专栏。

老猿Python,跟老猿学Python!

☞ ░ 前往老猿Python博文目录 https://blog.youkuaiyun.com/LaoYuanPython ░
在UOS/Deepin下安装 Python 3.11.5 图文详解 支持国产OS,基于国产OS做开发。Python 3.11.5 怎么在 UOS/Deepin 下安装的亲身操作记录,完全可行,值得信赖。Linux 也可以图形化操作,省略很多命令。 阅读详情

相关推荐

UOS更换python3.7及安装pip与pyinstaller及更换pip源提高下载速率

PyInstaller是一个流行的工具,它可以将Python应用程序打包成独立的可执行文件,使其可以在没有安装Python解释器的系统上运行。如果您的系统中安装了多个Python版本,确保您使用的是系统认为的"默认"Python版本的pip。如果您系统中安装了多个Python版本,确保您正在使用的是正确的版本。安装好所需的Python版本后,需要设置系统默认的Python版本。的值替换为您选择的镜像源地址。按照上述步骤,您应该能够成功设置pip的默认镜像源,以便在安装Python包时获得更快的下载速度。

u013934107的博客 5641

信创服务器操作系统的配置与管理(麒麟版)

信创趋势下,资源围绕网络管理员、网络工程师等岗位对银河麒麟服务器版管理核心技术技能的要求,应用工作过程系统化方法开发了包括统UOS简介、shell、Bash、目录结构、文件系统、VIM编辑器、用户与组、SSHD远程登录、网络简介、安全策略、软件源、UOS文件权限、UOS磁盘管理、SAMBA服务、DHCP服务、DNS服务、WEB服务、FTP服务、代理服务器、邮件服务器、防火墙、NAT转换等14个项目,场景化的还原企业实际项目和业务流程。每个项目都按企业工作实际分解为若干个工作任务,通过项目背景、项目分析、项目相关知识为子任务做铺垫,任务实施过程中由任务规划、任务实施和任务验证构成,符合工程项目实施的一般规律。  本课程主要学习内容:1、服务器基础配置:项目1部署Kylin服务器系统项目2使用shell管理本地文件项目3 管理信息中心的用户与组项目4 Kylin系统的基础配置2、基础服务部署:项目5企业内部数据存储与共享项目6部署企业的DHCP服务项目7部署企业DNS服务项目8部署企业的WEB服务项目9 部署企业的FTP服务3、高级服务部署:项目10部署企业squid代理服务器项目11部署企业的邮件服务器项目12 部署Kylin服务器防火墙课程考核:综合项目实训/课程考评

统信UOS V20 安装python2.7.18详细教程

这里是8.4.1,对应的python版本要是2.7.15以上,否则后面make的时候会报错。/usr/local 下创建python2文件夹,将安装包上传至此。输入以下命令即可解决。

为谁伫立在风中 3789

信创操作系统Linux(Bclinux、龙蜥、欧拉、Rocky、Alma)

linux

qyq88888的专栏 7万+

“Python编码异常:‘utf-8‘ codec can‘t decode byte 0xff in position 0:“——如何处理?

当Python无法猜测文件编码格式时,它会使用默认的UTF-8编码格式进行解码。但是,如果文件的实际编码格式与UTF-8不同,就会导致解码错误。例如,如果文件编码方式为GBK,可以在打开文件时添加“encoding=‘gbk’”参数。Python是一种功能强大的编程语言,但是在编写代码时,常常会遇到编码异常的问题。这个错误通常在读取文件时出现,特别是在处理非UTF-8编码的文件时。总之,Python的编码异常问题是一个比较常见的错误,但是通过以上介绍的解决方法,应该可以轻松解决这个问题。

. 1万+

BookSim2.0 教程

本文是yz关于BookSim2.0的个人学习经验与教程。 1.介绍 什么是BookSim2.0 BookSim2.0 是周期正确的互联网络模拟器(A Cycle-Accurate Interconnection Network Simulator),被设计用来伴随William James Dally 等人出版的的书籍 Principles and Practices of INterconnection on Networks使用。 此后其功能不断得到扩展。当前的主要版本 BookSim 2.0 支持广泛

更新一些计算机体系架构NoC,GEM5, AXI4,还有machine learning 的日常 5737

统信UOS_麒麟KYLINOS上安装特定版本python

hello,大家好啊!Python作为一种广泛使用的编程语言,其版本多样性给开发者带来了既便利又挑战的情况。不同的项目可能需要不同版本的Python,而在统信UOS/麒麟KYLINOS这样的操作系统上,如何灵活地管理和切换Python版本,就成为了一个值得探讨的话题。今天,我要给大家介绍的是如何在这两个操作系统上使用pyenv来安装和管理特定版本的Python。

鹏大圣运维 4252

详细对比模型训练和模型精调

当我们进行模型精调(Fine-Tuning)和模型训练时,我们需要考虑到不同的步骤和目标。

pumpkin84514的博客 1853

如何在统信UOS里安装Python 3.11

Python是世界上使用最广泛的编程语言之一。凭借其简单易学的语法,Python是初学者和经验丰富的开发人员的流行选择。Python是相当通用的编程语言。它可以用于构建各种应用程序,从简单应用到复杂的机器学习算法。Python 3.11有许多单独的性能改进,最大的一个新功能是自适应解释器,由于对象的类型很少更改,解释器现在尝试分析正在运行的代码。并用类型特定的字节码替换常规字节码。例如,二进制操作(加法、减法等)可以被替换为整数、浮点和字符串的特殊版本替换。

8008

ADS新手必看:5分钟搞定Smith圆图阻抗匹配(附详细操作截图)

本文为射频电路设计新手提供了在ADS软件中快速使用Smith圆图进行阻抗匹配的实战指南。通过清晰的步骤和操作截图,详细演示了如何从负载阻抗点出发,通过添加电感和电容元件,在5分钟内完成向50欧姆标准阻抗的匹配,并介绍了仿真验证与性能调优的方法,帮助工程师和学生直观掌握这一核心技能。

weixin_29261711的博客 397

C# Log4Net不输出日志的解决方法

log4net是一个流行的 .NET 日志框架,用于记录应用程序的日志信息。如果你在使用log4net。

精通搬砖,资深技术砖家,在软件开发,人工智能,设备开发等领域都有研究。商业合作&交流学习可私信联系。 1264

2024年十大信创操作系统之中科红旗的红旗 Linux

强大的安全性、稳定性和开放性

Lalolander的博客 5217

基于ThingsBoard+ESP8266的MQTT远程控制实战:从设备接入到仪表盘交互

本文详细介绍了基于开源物联网平台ThingsBoard与ESP8266开发板,通过MQTT协议实现远程控制的完整实战流程。从环境搭建、设备创建、仪表盘设计到核心代码编写与联调,手把手指导完成从云端到硬端的物联网闭环,为智能家居与物联网原型开发提供低成本、高效率的解决方案。

weixin_29192365的博客 334

信创之国产浪潮电脑+统信UOS操作系统体验3:使用 visual studio code搭建Python开发环境

本文介绍了在国产浪潮电脑+统信UOS操作系统使用 visual studio code搭建Python开发环境的具体过程和案例,基本过程也适用于其他linux操作系统。

老猿Python 5362

Qwen2.5-Omni实战:5分钟搞定多模态AI模型本地部署(含Thinker-Talker架构解析)

本文详细介绍了Qwen2.5-Omni多模态AI模型的本地部署流程,包括硬件配置、环境准备和实战应用开发。特别解析了其创新的Thinker-Talker架构,该架构通过TMRoPE位置编码实现跨模态同步处理,大幅提升多模态任务效率。5分钟即可完成部署,适合开发者快速实现文本、图像和音频的联合处理。

weixin_29085865的博客 172

OmniQuant:全方位校准实现大语言模型高效量化与移动端部署

模型量化是一种通过降低模型权重和激活值的数值精度来压缩模型大小、减少内存占用和计算开销的核心技术。其原理在于将高精度浮点数映射到低精度整数表示,从而在保持模型性能的同时,显著提升存储和计算效率。这项技术的价值在于,它使得大规模语言模型能够在消费级硬件和资源受限的移动设备上运行,极大地拓宽了AI应用场景。OmniQuant作为一项前沿的量化技术,通过引入可学习权重裁剪和可学习等价变换机制,实现了对权重分布不均匀和激活值异常值问题的协同优化,从而在极低的比特数下仍能保持优异的模型性能。本文深入探讨了OmniQu

weixin_30719711的博客 485

【信创】Linux上你必须要了解的用户组 _ 统信 _ 麒麟 _ 中科方德

Hello,大家好啊!今天给大家带来一篇关于在信创操作系统上用户组介绍的文章。在统信UOS的账户设置中,我们可以看到用户组,点击进去后,可以看到许多用户组,但是不清楚它们的具体用途。本文将带大家了解Linux上的用户组相关知识,帮助您更好地管理和使用这些用户组。欢迎大家分享转发,点个关注和在看吧!

鹏大圣运维 2178

EtherCAT主站SOEM -- 15 -- CIA402伺服驱动器子协议

以上就是EtherCAT主站SOEM – 15 – CIA402伺服驱动器子协议的内容。有不明白的地方欢迎留言;有建议欢迎留言,我后面编写文档好改进。创作不容,如果文档对您有帮助,记得给个赞。

常驻客栈的博客--嵌入式EtherCAT 2737

信创国产Linux操作系统汇总:从桌面到服务器,百花齐放

信创国产Linux操作系统汇总:从桌面到服务器百花齐放!

宝子速来!这儿是我程序员的“快乐星球”博客。没有晦涩代码轰炸,满是斗bug糗事、技术趣闻。算法如神奇魔法,bug似调皮精灵,我用诙谐语言拆解编程,让你在欢笑中解锁代码新姿势,速来围观! 3063

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

统信UOS安装Python-Scapy

安装完Python后,你可以使用pip(Python的包管理工具)来安装Scapy。在统信UOS上,pip通常与Python 3一起安装。首先,你需要确保统信UOS系统上已经安装了Python。按照以上步骤操作后,你应该能够在统信UOS系统上成功安装并使用Python-Scapy进行网络数据包的操作和分析。这条命令将导入Scapy库并打印其版本号,如果成功打印出版本号,则说明Scapy已经成功安装。

Flask Web 2274

锂电池充电器电路设计 里面有电路

锂电池充电器电路设计 里面有电路 3.7V升压到5V电路设计。

【信创】Linux操作系统上sudo命令详解 _ 统信 _ 麒麟 _ 方德

Hello,大家好啊!今天给大家带来一篇关于在信创操作系统上sudo命令详解的文章。sudo(Superuser Do)命令是Linux系统中非常重要的工具,它允许普通用户以超级用户(root)的身份执行命令,从而对系统进行管理和配置。本文将详细介绍sudo命令的使用方法、配置技巧及安全性考量。欢迎大家分享转发,点个关注和在看吧!

鹏大圣运维 3894

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

统信UOS下源码编译安装Python实操

本文记录统信UOS 1050e下安装Python3.13的详细过程,所有操作均在root下完成。麒麟操作系统、其他版本的Python安装也都差不多。

hhuysh的博客 2653

【Web安全与防护】 在统信UOS上安装部署Python虚拟环境

通过以上步骤,你可以在统信UOS上成功创建和管理Python虚拟环境,实现项目间的依赖隔离。

Flask Web 1822

python中有中文报错

在python程序中,只要有中文就会报错,不管是否在注释里。 SyntaxError: Non-ASCII character '\xe5' in file paint.py on line 14, but no encoding declared; see http://python.org/dev/peps/pep-0263/ for details 原因 python的默认编码文件是用的ASCII码,python文件中使用了中文等非英语字符。 解决办法 在Python源文件的最开始一行,加入一句: #

DayOneMore的博客 3391

统信(UOS)系统下使用vscode运行Python遇到问题汇总

使用UOS系统下用vscode进行Python编程遇到问题汇总

weixin_48359180的博客 775
上一篇: “第六届世界声博会暨2023科大讯飞全球1024开发者节”开幕式回顾及舆情问题
下一篇: VSCode中的任务什么情况下需要配置多个问题匹配器problemMatcher?多个问题匹配器之间的关系是什么?
LaoYuanPython
LaoYuanPython 2020年博客之星Top3 2020年博客之星Top3 领域专家: Python技术领域 领域专家: Python技术领域
博客等级 码龄8年 15万+粉丝 1324原创
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

LaoYuanPython

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值