python中编码

本文详细解析Python中字符串的基本概念,包括str对象与unicode对象的区别,以及如何进行编码转换。通过实例展示如何处理不同编码的字符串,以及中文在Python中的存储与处理方式。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

python中的str对象其实就是"8-bit string" ,字节字符串由unicode经过编码(encode)后的字节组成的,
本质上类似java中的byte[]。 
而python中的unicode对象应该才是等同于java中的String对象,或本质上是java的char[]。
Python内部的字符串一般都是 Unicode编码,代码中字符串的默认编码与代码文件本身的编码是一致的。
所以要做一些编码转换通常是要以Unicode作为中间编码进行转换的,
即先将其他编码的字符串解码(decode)成 Unicode,再从 Unicode编码(encode)成另一种编码。
str.decode()----> unicode对象
unicode.encode()------> str对象

中文编码(默认市asci)
在汉前加个u(u’汉字‘--->它实则为unicode对象),这个u表示将后面跟的字符串以unicode格式存储,
如果不加upython会根据代码第一行标称的(# -*- coding: utf-8 -*- )编码识别代码中的汉字,然后转换成unicode对象内部处理使用。

Str =  '\u597d\u597d' 
Str.decode('unicode_escape')   能将字符串解码为unicode字符串

from chardet import detect
detect('文本')  #探测编码 Unicode :\u0000
二进制编码:\x00\x00,utf-8,cp936都是二进制编码
# Unicode转化为二进制编码中的一种:utf8
unicodeStr.encode('utf8')
# 二进制编码根据自己的编码种类转化为Unicode
utf8Str.decode('utf8')

# 字符串中混进了\x00
String = 'Utf-8字\x00符串'
print(repr(String.decode('utf8', 'replace')))
print(repr(String.decode('utf8', 'ignore')))
 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值