python 中 bytes 中的乱码怎么转成中文字符

作者&投稿:欧阳逸 (若有异议请与网页底部的电邮联系)
python 如何将乱码转成汉字~

1、python2与python3稍微有点区别
2、python2中默认的字符编码格式都是unicode,在字符串前加'u',表示unicode 编码
3、将unicode转换成中文,只需要用deconde解码就可以了
>>> u='欢迎'>>> e=u.encode()>>> eb'\xe6\xac\xa2\xe8\xbf\x8e'>>> e.decode()#python3中默认就是utf-8编码'欢迎'>>> e.decode('gbk')#如果解码为gbk就是乱码'娆四繋'

python2编码环境比较复杂,在这里不做详细说明

中文编码问题一直是程序员头疼的问题,而Python2中的字符编码足矣令新手抓狂。本文将尽量用通俗的语言带大家彻底的了解字符编码
以及Python2和3中的各种编码问题。
一、什么是字符编码。
要彻底解决字符编码的问题就不能不去了解到底什么是字符编码。计算机从本质上来说只认识二进制中的0和1,可以说任何数据在计算机
中实际的物理表现形式也就是0和1,如果你将硬盘拆开,你是看不到所谓的数字0和1的,你能看到的只是一块光滑闪亮的磁盘,如果你
用足够大的放大镜你就能看到磁盘的表面有着无数的凹凸不平的元件,凹下去的代表0,突出的代表1,这就是计算机用来表现二进制的方
式。
1.ASCII
现在我们面临了第一个问题:如何让人类语言,比如英文被计算机理解?我们以英文为例,英文中有英文字母(大小写)、标点符号、特
殊符号。如果我们将这些字母与符号给予固定的编号,然后将这些编号转变为二进制,那么计算机明显就能够正确读取这些符号,同时通
过这些编号,计算机也能够将二进制转化为编号对应的字符再显示给人类去阅读。由此产生了我们最熟知的ASCII码。ASCII 码使用指定
的7 位或8 位二进制数组合来表示128 或256 种可能的字符。这样在大部分情况下,英文与二进制的转换就变得容易多了。
2.GB2312
然而,虽然计算机是美国人发明的,但是全世界的人都在使用计算机。现在出现了另一个问题:如何让中文被计算机理解?这下麻烦了,
中文不像拉丁语系是由固定的字母排列组成的。ASCII 码显然没办法解决这个问题,为了解决这个问题中国国家标准总局1980年发布《信
息交换用汉字编码字符集》提出了GB2312编码,用于解决汉字处理的问题。1995年又颁布了《汉字编码扩展规范》(GBK)。GBK与
GB 2312—1980国家标准所对应的内码标准兼容,同时在字汇一级支持ISO/IEC10646—1和GB 13000—1的全部中、日、韩(CJK)汉
字,共计20902字。这样我们就解决了计算机处理汉字的问题了。
3.Unicode
现在英文和中文问题被解决了,但新的问题又出现了。全球有那么多的国家不仅有英文、中文还有阿拉伯语、西班牙语、日语、韩语等
等。难不成每种语言都做一种编码?基于这种情况一种新的编码诞生了:Unicode。Unicode又被称为统一码、万国码;它为每种语言中
的每个字符设定了统一并且唯一的二进制编码,以满足跨语言、跨平台进行文本转换、处理的要求。Unicode支持欧洲、非洲、中东、亚
洲(包括统一标准的东亚象形汉字和韩国表音文字)。这样不管你使用的是英文或者中文,日语或者韩语,在Unicode编码中都有收录,
且对应唯一的二进制编码。这样大家都开心了,只要大家都用Unicode编码,那就不存在这些转码的问题了,什么样的字符都能够解析
了。
4.UTF-8
但是,由于Unicode收录了更多的字符,可想而知它的解析效率相比ASCII码和GB2312的速度要大大降低,而且由于Unicode通过增加一
个高字节对ISO Latin-1字符集进行扩展,当这些高字节位为0时,低字节就是ISO Latin-1字符。对可以用ASCII表示的字符使用Unicode
并不高效,因为Unicode比ASCII占用大一倍的空间,而对ASCII来说高字节的0对他毫无用处。为了解决这个问题,就出现了一些中间格
式的字符集,他们被称为通用转换格式,即UTF(Unicode Transformation Format)。而我们最常用的UTF-8就是这些转换格式中的一
种。在这里我们不去研究UTF-8到底是如何提高效率的,你只需要知道他们之间的关系即可。
总结:
1.为了处理英文字符,产生了ASCII码。
2.为了处理中文字符,产生了GB2312。
3.为了处理各国字符,产生了Unicode。
4.为了提高Unicode存储和传输性能,产生了UTF-8,它是Unicode的一种实现形式。

print(你的bytes.decode('utf-8'))

过这些编号,计算机也能够将二进制转化为编号对应的字符再显示给人类去阅读。由此产生了我们最熟知的ASCII码。ASCII 码使用指定 的7 位或8 位二进制数组合来表示128 或256 种可能的字符。这样在大部分情况下,英文与二进制...

过这些编号,计算机也能够将二进制转化为编号对应的字符再显示给人类去阅读。由此产生了我们最熟知的ASCII码。ASCII 码使用指定 的7 位或8 位二进制数组合来表示128 或256 种可能的字符。这样在大部分情况下,英文与二进制...


韩城市17026098617: python的内置字典数据类型为? -
军佩谷丙: python中有六个标准的数据类型: Number(数字)、String(字符串)、List(列表)、Tuple(元组)、Sets(集合)、Dictionary(字典) 字典只是其中之一

韩城市17026098617: python3.0中怎么创建bytes型数据,举个例子 -
军佩谷丙: bytes([1,2,3,4,5,6,7,8,9]) bytes("python", 'ascii') # 字符串,编码

韩城市17026098617: python unicode 和 str的区别 -
军佩谷丙: str是经过编好码的字符串,如unicode,gb2312,ascii编码,可以表示不同语言中的字符,可以解码成byte byte是字节,只能是ascii码0-255的字符,表示未经编码处理的原始字符串

韩城市17026098617: python3转成bytes其中bytes()与encode()有什么区别? -
军佩谷丙: 把c:\python34\lib\site-packages\xlwt3\biffrecords.py文件第235行中的uowner.encode('utf-8')改成uowner即可.xlwt3有bug的.

韩城市17026098617: Python基本内置数据类型有哪些 -
军佩谷丙: 内置类型是指任何语言在设计初期定义的类型,如C语言中的int、double、char等.它也是在一种语言中最基本的类型,与编译器编译出的代码具有重大关系.值得一提的是,不同语言也拥有不同的内置类型, 但是所有内置类型的定义都与计算...

韩城市17026098617: Python中BytesIO的使用场景,什么时间应该使用BytesIO -
军佩谷丙: 当使用文本模式打开文件时,它返回一个TextIOBase的子类. 当使用二进制打开时,返回的是BufferedIOBase的子类. 准确细分为:可读二进制模式,返回BufferReader对象;在可写和追加模式中,返回BufferWriter对象,在读写模式中,返回BufferRandom. 当buffering关闭时,原始数据流,一个RawIOBase的子类将被返回.

韩城市17026098617: 请问python中这字符串转bytes怎么做算的? -
军佩谷丙: 字符串类(str)有一个方法encode可以将字符串转换为bytes对象.调用encode方法是,可选择以字符串方式传递一个编码,默认的编码是UTF-8.下图是按默认编码将字符串'你好'转换成bytes并输出.代码 输出

韩城市17026098617: 如何理解python3的unicode,以及全角半角转换 -
军佩谷丙: 1. unicode是一个编码的standard,表明了字符与数字之间的映射,是可变长的.2. 映射后的数据如何编码为字节?这个就是具体的编码规则:目前最主流的是UTF-8,同样,它也是变字长的.python3中的str都是unicode的:“The default ...

韩城市17026098617: python中为什么从str到bytes的转化会出现类似' \x** '的形式 -
军佩谷丙: 字节码(英语:Bytecode)通常指的是已经经过编译,但与特定机器码无关,需要直译器转译后才能成为机器码的中间代码.字节码通常不像源码一样可以让人阅读,而是编码后的数值常量、引用、指令等构成的序列.字节码主要为了实现特定软件运行和软件环境、与硬件环境无关.字节码的实现方式是通过编译器和虚拟机器.编译器将源码编译成字节码,特定平台上的虚拟机器将字节码转译为可以直接执行的指令.1. 除了你最终好奇的"\x"之外,应该都不难理解:三个字节码对应了一个汉字. 2. "\x"是PEP也就是Python开发团队所采用的Bytecode标识,无实际含义.

韩城市17026098617: Python2和3中关于str和unicode以及UTF - 8的更改到底是什么意思 -
军佩谷丙: python3中所有字符串都是unicode python2中在字符串前加上u才是unicode字符串,否则字符串使用的是当前默认编码

本站内容来自于网友发表,不代表本站立场,仅表示其个人看法,不对其真实性、正确性、有效性作任何的担保
相关事宜请发邮件给我们
© 星空见康网