ubuntu下python处理mysql中文乱码问题

最新推荐文章于 2021-02-21 04:04:26 发布

原创最新推荐文章于 2021-02-21 04:04:26 发布 · 803 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #mysql

python 专栏收录该内容

11 篇文章

订阅专栏

本文记录了解决在Ubuntu环境下安装MySQL时遇到的中文乱码问题，以及后续在使用Python处理MySQL数据时再次遇到乱码的解决方法。通过设置MySQL字符集为utf8，确保Python编写时添加utf8字符集，并在调用MySQL时执行SET NAMES utf8命令，最终成功避免了乱码问题。

题记

在ubuntu安装mysql时候,遇到中文乱码问题,根据网上相关资料,就是需要修改字符集.没想到在用python处理mysql时候,还是出现乱码.现记录一下解决方法.

(1)设置mysql字符集为utf8
(2)python编写时候添加utf8字符集
(3)python调用mysql时候,设置connection.execute("SET NAMES utf8")

example:

# coding:utf-8
import sys
import Mysql
reload(sys)
sys.setdefaultencoding("utf-8")
mysql=Mysql('连接数据库')
mysql.conn.cursor.execute("SET NAMES UTF8")

参考资料:
(1)http://www.xuebuyuan.com/1466756.html
(2)http://blog.youkuaiyun.com/foyuan/article/details/1711100

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

James-CDD

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

python查询mysql中文乱码问题

01-20

python2.7 查询或者插入中文数据在mysql中的时候出现中文乱码 — 可能情况: 1.mysql数据库各项没有设置编码,默认为’latin’ 2.使用MySQL.connect的时候没有设置默认编码 3.没有设置python的编码,python2.7默认为’...

Ubuntu的MySQL中文乱码问题

12-14

近一段时间学习Django，在进行与MySQL数据联合使用的插入数据的时候遇到下边的问题：　/usr/local/lib/python2.7/dist-packages/Django-1.11.dev20170117002028-py2.7.egg/django/db/backends/mysql/base.py:109: ...

参与评论您还未登录，请先登录后发表或查看评论

pycharm+mysql+乱码_python页面乱码问题及解决（pycharm+mysql）

weixin_35843523的博客

01-20

344

Ubuntu下： there is no doubt that 这是编码问题引起的，应该确保mysql,pycharm和浏览器的编码三码合一。 1,在每个python页开头加上一行“# -*- coding: utf-8 -*-” 类这样：#！/usr/bin/python # -*- coding: utf-8 -*- 2,修改pycharm的编码： setting -Ubuntu下：there...

ubuntu中mysql中文乱码及用python3.x调用

weixin_30454481的博客

11-04

106

首先声明解决方法也是网上找来的，知识自己记下来以防以后用到。ubuntu版本是14.04使用apt-get命令安装mysql sudo apt-get install mysql-server 　　好了之后使用mysql -u root -p检查是否能正常启动 mysql -u root -p 　　 Welcome to the MyS...

python写入mysql乱码_Python3数据插MySQL中文乱码解决方案

weixin_39858275的博客

12-03

210

1. database要utf8的CREATE DATABASE spiderTest DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci;2. 表要utf8的use spiderTestCREATE TABLE test(ID INT(18) PRIMARY KEY AUTO_INCREMENT,test1 ...

ubuntu下mysql中文乱码_Ubuntu的MySQL中文乱码问题--自己躺坑

weixin_29034963的博客

02-04

165

最近一段时间学习Django，在进行与MysqL数据联合使用的插入数据的时候遇到下边的问题：/usr/local/lib/python2.7/dist-packages/Django-1.11.dev20170117002028-py2.7.egg/django/db/backends/MysqL/base.py:109: Warning: Incorrect string value: '\xE...

Ubuntu 16.04 Python读取MySQL数据库中文乱码的问题

梦家の博客

10-22

634

Contented with little, yet wishing for more. 为收获一点点感到满足，但是希望可以获得更过。 Ubuntu 16.04 Python读取MySQL数据库中文乱码的问题MySQL数据库安装好之后，发现不能向数据库中插入中文，作为一个伟大的天朝人简直不能忍啊。后来网上百度看到修改配置的解决方案，发现乱七八糟一大堆，很多不能解决问题。尝试了各种方法，将最

python查询mysql 乱码_python查询mysql中文乱码问题

weixin_39956558的博客

02-21

171

python2.7 查询或者插入中文数据在mysql中的时候出现中文乱码---可能情况:1.mysql数据库各项没有设置编码,默认为‘latin‘2.使用MySQL.connect的时候没有设置默认编码3.没有设置python的编码,python2.7默认为‘ascii‘4.没有解码---解决方法:1.设置mysql的编码ubuntu执行下列语句:** sudo vim /etc/mysql/my...

python 连接mysql数据库查询结果中文显示乱码_python查询mysql中文乱码问题

weixin_39957951的博客

12-06

190

问题:python2.7 查询或者插入中文数据在mysql中的时候出现中文乱码---可能情况:1.mysql数据库各项没有设置编码,默认为'latin'2.使用MySQL.connect的时候没有设置默认编码3.没有设置python的编码,python2.7默认为'ascii'4.没有解码---解决方法:1.设置mysql的编码ubuntu执行下列语句:** sudo vim /etc/mysql...

python查询mysql 乱码问题_python查询mysql中文乱码问题

weixin_39820437的博客

01-19

109

Ubuntu下MySQL中文乱码的问题解决

12-16

/usr/local/lib/python2.7/dist-packages/Django-1.11.dev20170117002028-py2.7.egg/django/db/backends/mysql/base.py:109: Warning: Incorrect string value: '\xE6\x88\x90\xE5\x8A\x9F...' for column 'json' at...

解决python2.7 查询mysql时出现中文乱码

09-10

在Python 2.7中，当进行MySQL数据库操作时，尤其是涉及中文字符时，可能会遇到中文乱码的问题。这个问题通常涉及到多个层面，包括数据库配置、Python连接设置以及数据读取时的编码处理。以下是一些详细的解决步骤和...

记录python ConfigParser 处理编码问题

cdd801的专栏

09-24

5082

题记使用python的配置文件，直接用的configParser模块，简单方便，实乃读取配置必备。问题的产生因为使用两台机器，一台linux，一台win7，win7上ini文件的编码出现问题，导致configParser的读取异常。问题的原因utf编码问题，在win上会被添加bom，导致编码读取有问题。问题解决方法在读取的时候设置编码，使用到codecs，添加上“utf-8-sig”config =

文件误删后,ubuntu系统重新安装pycharm.

cdd801的专栏

04-27

4660

(1)背景之前删除文件时候,不小心将文件夹里面所有文件都删除了,包括一些应用软件(pycharm,eclipse),在使用恢复软件恢复之后,不过没能成功,文件是没有回来,于是决定重新安装. (2)问题描述本想着文件被删除了,也就是应用被卸载,但情况不是. 从pycharm官网下载文件,解压进行安装,安装步骤也就是在./bin 文件夹下面运行pycharm.sh ,于是问题来了,当执行这个脚本的时候,

python 中keyword argument和non-key argument

cdd801的专栏

05-29

2571

python def var_args_func(formal1, formal2=’xyz’,*vark,**varnk): print “formal argument 1 “,formal1 print “formal argument 2 “,formal2 for eachk in vark: print’

Python 中特殊变量/方法命名规则说明(特别是私有变量)及使用实例

cdd801的专栏

03-23

1329

以下内容使用Markdown编写. 问题引入命名规范常规变量命名特殊变量命名实例演示私有变量方法的用途知识点延伸总结参考资料问题引入在编写orm时候,看到一些参考资料上对变量的命名有些特殊,有的前面有一个下划线,有时会有两个,很是困惑;本以为变量的命名只要是前面是下划线或字母即可,为了弄清这个问题,产生这个文章 .命名规范常规变量命名这里可以参考资料特殊变量命名1、 _

a byte of python

cdd801的专栏

04-07

932

Mark it comes to P 84 Inheritance

Win 下使用py2exe

cdd801的专栏

06-30

768

写在前面临时作为记录，就先不怎样排版了。在ubuntu上运行python程序很是方便，但是最终的结果是有产出物给他人使用（这里是我们的编辑），因此需要将py转出exe。工具能够使用的工具有几个，pyinstaller,cx_xxxx(忘记怎么写的)，py2exe。据说都是可以转成exe，关于工具的区别就不说（其实也不了解，只是看了几篇介绍），还是使用py2exe。使用py2exe使用比较简单，但

ubantu上传excel文件乱码，读取python代码中文乱码

最新发布

12-17

<think>我们面对的问题有两个部分：Ubuntu系统上传Excel文件乱码和Python代码读取中文乱码。根据提供的引用，我们可以尝试找到解决方案。首先，对于Ubuntu系统上传Excel文件乱码：这可能与系统的默认编码设置有关。Ubuntu默认使用UTF-8编码，而上传的文件可能是其他编码（如GBK）。我们可以尝试在系统中设置环境变量或修改区域设置。其次，Python读取中文乱码问题：根据引用[2]，我们可以指定文件的编码方式。例如，使用`open`函数时指定`encoding='utf-8'`。如果文件不是UTF-8编码，则需要使用正确的编码，如GBK。另外，引用[1]提到使用pymysql读取MySQL内容时处理中文乱码，这与数据库连接有关，但问题中涉及的是Excel文件，所以可能不直接适用。不过，处理乱码的思想是相似的：确保输入输出的编码一致。引用[3]提到pdfkit中文乱码是因为系统中缺少中文字体，这提示我们可能需要检查系统中是否安装了中文字体。引用[4]提到Java打包文件生成压缩文件时出现乱码，解决方法未详细说明，但可能涉及编码设置。引用[5]提到了解决Python读取文件乱码问题（UnicodeDecodeError），建议使用正确的编码打开文件。综合以上，解决方案如下： ### 1. Ubuntu系统上传Excel文件乱码 - **检查系统语言环境**：确保系统支持中文。可以通过以下命令安装中文语言包并设置本地化环境： ```bash sudo apt-get install language-pack-zh-hans sudo locale-gen zh_CN.UTF-8 ``` - **设置环境变量**：在`~/.bashrc`或`~/.profile`中添加以下行，然后重启终端或执行`source ~/.bashrc`： ```bash export LANG="zh_CN.UTF-8" export LC_ALL="zh_CN.UTF-8" ``` ### 2. Python代码读取中文乱码 - 明确Excel文件的编码。常见的编码有UTF-8、GBK、GB2312等。如果不确定，可以尝试用不同编码打开。 - 使用`pandas`读取Excel文件时，可以指定编码（虽然pandas读取Excel通常不需要指定编码，因为Excel文件是二进制格式，但有时可能需要处理其中的文本）： ```python import pandas as pd df = pd.read_excel('file.xlsx', engine='openpyxl') # 确保安装了openpyxl ``` 如果是从CSV文件读取，则需要指定编码： ```python df = pd.read_csv('file.csv', encoding='gbk') # 或者'utf-8' ``` - 如果使用`open`函数读取文本文件，指定编码： ```python with open('file.txt', 'r', encoding='utf-8') as f: # 或'gbk' content = f.read() ``` ### 3. 检查中文字体如果乱码出现在生成PDF或其他需要渲染的场合（如绘图），确保系统中安装了中文字体。安装中文字体： ```bash sudo apt-get install fonts-wqy-microhei # 文泉驿微米黑 sudo apt-get install fonts-wqy-zenhei # 文泉驿正黑 ``` ### 总结步骤： 1. **设置Ubuntu系统语言环境**：安装中文支持并设置环境变量。 2. **在Python中明确指定文件编码**：根据文件实际编码在读取时指定。 3. **安装中文字体**：避免在生成PDF等时出现乱码。如果问题依然存在，请检查上传文件的原始编码，并尝试转换编码（如使用`iconv`命令）。 §§相关问题§§ 1. 如何检查一个文件的编码格式？ 2. 如何在Ubuntu中安装其他中文字体？ 3. 使用Python的pandas库读取Excel文件时遇到编码错误怎么办？ </think> ### Ubuntu系统上传Excel文件乱码及Python读取中文乱码解决方案 #### 一、Ubuntu系统上传Excel文件乱码 **根本原因**：文件编码与系统编码不匹配（Ubuntu默认UTF-8，Excel文件可能为GBK等编码）[^1][^5]。 **解决方案**： 1. **安装中文语言包**： ```bash sudo apt install language-pack-zh-hans sudo locale-gen zh_CN.UTF-8 ``` 2. **修改系统环境变量**：在 `~/.bashrc` 中添加： ```bash export LANG="zh_CN.UTF-8" export LC_ALL="zh_CN.UTF-8" ``` 执行 `source ~/.bashrc` 生效。 3. **转换文件编码**（上传后处理）： ```bash iconv -f GBK -t UTF-8 input.xlsx > output_utf8.xlsx ``` #### 二、Python读取Excel中文乱码 **核心问题**：未指定正确编码或缺少中文字体支持[^2][^3]。 **解决方案**： 1. **使用pandas时指定引擎和编码**： ```python import pandas as pd # 读取Excel文件 df = pd.read_excel('file.xlsx', engine='openpyxl') # 确保安装openpyxl # 若为CSV文件（需指定编码） df = pd.read_csv('file.csv', encoding='gbk') # 或 encoding='utf-8' ``` 2. **安装中文字体支持**： ```bash sudo apt install fonts-wqy-microhei # 文泉驿字体 ``` 3. **处理特殊场景（如PDF导出）**： ```python # 使用pdfkit时添加中文字体配置 import pdfkit options = { 'encoding': "UTF-8", 'no-outline': None, 'enable-local-file-access': None, 'font-family': 'WenQuanYi Micro Hei' # 指定中文字体 } pdfkit.from_file('input.html', 'output.pdf', options=options) ``` #### 三、通用调试建议 1. **检测文件编码**： ```python with open('file.xlsx', 'rb') as f: print(f.read(100)) # 查看文件头判断编码 ``` 2. **强制转码处理**： ```python with open('file.xlsx', 'r', encoding='gbk', errors='ignore') as f: content = f.read() ``` > **关键提示**： > - 确保**生成文件的程序**（如数据库导出）和**读取文件的程序**使用相同编码 > - Linux环境下优先使用UTF-8编码标准[^2][^5]