python学习笔记总-20201001

1、编码问题:

ASCII编码是1个字节,而Unicode编码通常是2个字节(ASCII编码是美国人创建主要编译是英文字符,而Unicode编码是为了字符集而生,编译各国字符),但是如果Unicode编译的纯英文字符时所需要的存储空间比ASCII编码多一倍,故产生utf-8编码。

UTF-8编码把一个Unicode字符根据不同的数字大小编码成1-6个字节,常用的英文字母被编码成1个字节,汉字通常是3个字节,只有很生僻的字符才会被编码成4-6个字节。(ASCII编码实际上可以被看成是UTF-8编码的一部分,所以,大量只支持ASCII编码的历史遗留软件可以在UTF-8编码下继续工作。)

在计算机内存中,统一使用Unicode编码,当需要保存到硬盘或者需要传输的时候,就转换为UTF-8编码。

用记事本编辑的时候,从文件读取的UTF-8字符被转换为Unicode字符到内存里,编辑完成后,保存的时候再把Unicode转换为UTF-8保存到文件中。

python学习笔记总-20201001

浏览网页的时候,服务器会把动态生成的Unicode内容转换为UTF-8再传输到浏览器:

python学习笔记总-20201001

ps:备英文字母与中文汉字的编码字节数

python学习笔记总-20201001