在最新的Python 3版本中,字符串是以Unicode编码的,即Python的字符串支持多语言
html
编码和解码
字符串在内存中以Unicode表示,在操做字符串时,常常须要str和bytes互相转换
字符串是能够直接在内存上进行处理的,但若是要将其传输到网络或磁盘上,须要将其编码,反过来则须要解码,由于str是不能够直接存储在磁盘上或在网络上传输的
若是将字符串从内存传输到网络或保存到磁盘,则要把str转换为以字节为单位的bytes,称为编码
若是要从网络或磁盘上获取字符串,则要从网络上或者磁盘上读取字节流,并把bytes转换为str,称为解码
为避免乱码问题,应当始终坚持使用UTF-8编码对str和bytes进行转换,关于编码,请参照字符编码python
使用示例: 网络
单个字符的编码函数
print(ord('A')) #输出:65,获取字符的整数表示 print(chr(66)) #输出:B,把编码转换为对应的字符
十六进制表示编码
print('中文') #输出:'中文', print('\u4e2d\u6587') #输出:'中文','\u4e2d\u6587'和'中文'彻底对等,若是知道字符的整数编码,还能够用十六进制这么写str
bytes类型的数据表示spa
x = b'ABC' #Python对bytes类型的数据用带b前缀的单引号或双引号表示,'ABC'和b'ABC'在显示上彻底同样,但bytes的每一个字符都只占用一个字节
编码code
print('ABC'.encode('ascii')) #输出:b'ABC',以Unicode表示的str经过encode()方法能够编码为指定的bytes print('中文'.encode('utf-8')) #输出:b'\xe4\xb8\xad\xe6\x96\x87', print('中文'.encode('ascii')) #输出:报错,由于中文字符在ascii编码范围外,因此致使编码失败
解码htm
print(b'ABC'.decode('ascii')) #输出:'ABC' print(b'\xe4\xb8\xad\xe6\x96\x87'.decode('ascii')) #输出:'中文' print(b'\xe4\xb8\xad\xff'.decode('utf-8', errors='ignore')) #输出:'中',若是bytes中只有一小部分无效的字节,能够传入errors='ignore'忽略错误的字节
计算长度blog
#len(a)函数返回a的长度,若是a是字符串则返回字符数,若是a是字节表示则返回字节数 print(len('中文')) #输出:2,共2个字符 print(len('ABC')) #输出:3,共3个字符 print(len(b'ABC')) #输出:3,共是3个字节 print(len(b'\xe4\xb8\xad\xe6\x96\x87')) #输出:6,共是6个字节 print(len('中文'.encode('utf-8'))) #输出:6, 1个中文字符通过UTF-8编码后一般会占用3个字节,所以两个汉字的字节数是6
源码文件开头与编码内存
#!/usr/bin/env python3 告诉Linux/OS X系统,这是一个Python可执行程序,Windows系统会忽略这个注释 # -*- coding: utf-8 -*- 告诉Python解释器,按照UTF-8编码读取源代码,不然在源代码中写的中文输出可能会有乱码 #注意:告诉编译器使用UTF-8编码的同时,.py文件也要保存为UTF-8 without BOM编码,二者统一了,才可确保文件中的中文正常显示