Python 简明教程 --- 9,Python 编码

微信公众号:码农充电站pro
个人主页:https://codeshellme.github.io

当你选择了一种语言,意味着你还选择了一组技术、一个社区。
—— Joshua Bloch

目录

在这里插入图片描述

1,什么是计算机编码

编码

信息从一种形式转换到另一种形式的过程,就叫做编码。说白了,编码就是信息的一种转换过程。

比如,信息的加密解密,这就是信息的一种转换过程,它是信息的明文与密文之间的转换过程。

还有不同国家文字的翻译,这是语言之间的一种转换过程。

那么,编码也是一种信息的转换过程。

计算机编码

计算机编码是信息的人类可读形式与计算机可读形式之间的一种转换过程。

实际上,计算机是一种人造的,很“”的机器,它只认识01 这样的二进制数据,也称为机器码

提示:计算机优势在于它的计算速度很快。

那么,计算机要想能够存储/展现我们人类可读的,丰富多彩的信息(比如文字,图片,音频,视频等),这就涉及到了计算机编码

在这里插入图片描述

ASCII 码

ASCII 码(美国信息交换标准码),是最早的,也是较为简单的一种计算机编码。其主要用于表示英文字符,数字和一些标点符号。

比如,二进制数字01000001 (十进制为65)就表示大写字母A

在这里插入图片描述

GB2312

ASCII 码 虽能表示英文,但是无法表示其它语言,比如中文,韩文等。

为了表示中文,中国国家标准总局发布了GB2312(信息交换用汉字编码字符集),专门用于表示中文信息。

比如,十六进制D6D0 表示汉字

Unicode 码

世界上有很多的国家,每个国家都需要表示自己的文字,这就有了各种各样的计算机编码。每个国家都有自己的编码,这就不方便统一,也没有通用性。

为了统一不同国家的编码,表示不同国家的文字,诞生了Unicode 码,俗称万国码Unicode 码为每种语言中的每个字符设定了统一且唯一的二进制编码。

比如,十六进制4E2D 表示汉字

UTF8

Unicode 码 实际上是一个字符集,它只规定了二进制各个字符之间的对应关系,并没有规定如何在磁盘上存储(用几个字节来表示)。

提示:字节是计算机存储的最小单位
1024 字节为1 K
1024 K 为1 M
1024 M 为1 G

UTF32Unicode 码 的一种实现,一般用4个字节表示一个字符,这样比较浪费存储空间。因为,一个英文字符只用1 个字节就可表示,一个常用汉字用2 个字节就可表示。

为了节省存储空间,UTF8 一般用1 到4 个字节表示一个字符,比如英文字符用1 个字节,常用汉字用2 个字节。

注意:UTF8Unicode 码的一种实现,比较常用。UTF8使用变长字节来表示字符,意思就是,使用的字节数是可变的。

2,Python3 源文件编码

Python2.x 中,Python 源代码文件默认以ASCII 码格式编码。因此,在Python2.x中,默认情况下,是不支持中文的。如果强制写中文,则会出现以下错误:

SyntaxError: Non-ASCII character ...

如果想在Python2.x源代码文件中输入中文字符,可以使用UTF8编码,需要在代码文件的开头添加:

# -*- coding: UTF-8 -*-

或者:

# coding=utf-8

Python3.x 中,Python 源代码文件会统一采用Unicode 编码,默认以UTF8格式编码,就不需要在代码开头添加上面的代码。

3,Python3 字符串与编码

str 类型

上一节介绍了Python 字符串的相关操作,这里我们介绍一下Python 字符串与编码。

Python3 中的字符串类型<class 'str'>统一采用Unicode 编码,因此支持多种语言。

>>> print('中文')	# 中文
中文
>>> 
>>> print('english')	# 英文
english

bytes 类型

str 类型需要磁盘存储或者网络传输时,就需要转换为bytes 类型。

bytes 是一个二进制类型,它需要在str 之前加上b

>>> type(b'abc')
<class 'bytes'>

bytes 中只能包含ASCII 字符,若有非ASCII 字符,则会报错:

>>> s = b'中国'
  File "<stdin>",line 1
SyntaxError: bytes can only contain ASCII literal characters.

str 转为 bytes

str 类型转换为bytes 类型,需要使用str 中的encode 方法,参数utf8 是编码格式:

>>> s = '中国'
>>> s.encode('utf8')
b'\xe4\xb8\xad\xe5\x9b\xbd'

bytes 转为 str

bytes 类型转换为str 类型,需要使用bytes 中的decode 方法,参数utf8 是编码格式:

>>> s = b'\xe4\xb8\xad\xe5\x9b\xbd'
>>> s.decode('utf8')
'中国'

注意:当str 类型与bytes 类型互转时,推荐使用UTF8 编码

strUnicode 互转

str 转换为Unicode

>>> '中国'.encode('unicode-escape')
b'\\u4e2d\\u56fd'

Unicode 转换为str

>>> b'\\u4e2d\\u56fd'.decode('unicode-escape')
'中国'

4,ord()chr()

ord() 函数用于获取一个字符的十进制整数表示,chr()ord() 的反操作:

>>> ord('a')
97
>>> chr(97)
'a'
>>> ord('中')
20013
>>> chr(20013)
'中'

(完。)

推荐阅读:

Python 简明教程 --- 4,Python 变量与基本数据类型

Python 简明教程 --- 5,Python 表达式与运算符

Python 简明教程 --- 6,Python 控制流

Python 简明教程 --- 7,Python 字符串

Python 简明教程 --- 8,Python 字符串函数

欢迎关注作者公众号,获取更多技术干货。

码农充电站pro

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


使用OpenCV实现视频去抖 整体步骤: 设置输入输出视频 寻找帧之间的移动:使用opencv的特征检测器,检测前一帧的特征,并使用Lucas-Kanade光流算法在下一帧跟踪这些特征,根据两组点,将前一个坐标系映射到当前坐标系完成刚性(欧几里得)变换,最后使用数组纪录帧之间的运动。 计算帧之间的平
前言 对中文标题使用余弦相似度算法和编辑距离相似度分析进行相似度分析。 准备数据集part1 本次使用的数据集来源于前几年的硕士学位论文,可根据实际需要更换。结构如下所示: 学位论文题名 基于卷积神经网络的人脸识别研究 P2P流媒体视频点播系统设计和研究 校园网安全体系的设计与实现 无线传感器网络中
前言 之前尝试写过一个爬虫,那时对网页请求还不够熟练,用的原理是:爬取整个html文件,然后根据标签页筛选有效信息。 现在看来这种方式无疑是吃力不讨好,因此现在重新写了一个爬取天气的程序。 准备工作 网上能轻松找到的是 101010100 北京这种编号,而查看中国气象局URL,他们使用的是北京545
前言 本文使用Python实现了PCA算法,并使用ORL人脸数据集进行了测试并输出特征脸,简单实现了人脸识别的功能。 1. 准备 ORL人脸数据集共包含40个不同人的400张图像,是在1992年4月至1994年4月期间由英国剑桥的Olivetti研究实验室创建。此数据集包含40个类,每个类含10张图
前言 使用opencv对图像进行操作,要求:(1)定位银行票据的四条边,然后旋正。(2)根据版面分析,分割出小写金额区域。 图像校正 首先是对图像的校正 读取图片 对图片二值化 进行边缘检测 对边缘的进行霍夫曼变换 将变换结果从极坐标空间投影到笛卡尔坐标得到倾斜角 根据倾斜角对主体校正 import
天气预报API 功能 从中国天气网抓取数据返回1-7天的天气数据,包括: 日期 天气 温度 风力 风向 def get_weather(city): 入参: 城市名,type为字符串,如西安、北京,因为数据引用中国气象网,因此只支持中国城市 返回: 1、列表,包括1-7的天气数据,每一天的分别为一个
数据来源:House Prices - Advanced Regression Techniques 参考文献: Comprehensive data exploration with Python 1. 导入数据 import pandas as pd import warnings warnin
同步和异步 同步和异步是指程序的执行方式。在同步执行中,程序会按顺序一个接一个地执行任务,直到当前任务完成。而在异步执行中,程序会在等待当前任务完成的同时,执行其他任务。 同步执行意味着程序会阻塞,等待任务完成,而异步执行则意味着程序不会阻塞,可以同时执行多个任务。 同步和异步的选择取决于你的程序需
实现代码 import time import pydirectinput import keyboard if __name__ == &#39;__main__&#39;: revolve = False while True: time.sleep(0.1) if keyboard.is_pr
本文从多个角度分析了vi编辑器保存退出命令。我们介绍了保存和退出vi编辑器的命令,以及如何撤销更改、移动光标、查找和替换文本等实用命令。希望这些技巧能帮助你更好地使用vi编辑器。
Python中的回车和换行是计算机中文本处理中的两个重要概念,它们在代码编写中扮演着非常重要的角色。本文从多个角度分析了Python中的回车和换行,包括回车和换行的概念、使用方法、使用场景和注意事项。通过本文的介绍,读者可以更好地理解和掌握Python中的回车和换行,从而编写出更加高效和规范的Python代码。
SQL Server启动不了错误1067是一种比较常见的故障,主要原因是数据库服务启动失败、权限不足和数据库文件损坏等。要解决这个问题,我们需要检查服务日志、重启服务器、检查文件权限和恢复数据库文件等。在日常的数据库运维工作中,我们应该时刻关注数据库的运行状况,及时发现并解决问题,以确保数据库的正常运行。
信息模块是一种可重复使用的、可编程的、可扩展的、可维护的、可测试的、可重构的软件组件。信息模块的端接需要从接口设计、数据格式、消息传递、函数调用等方面进行考虑。信息模块的端接需要满足高内聚、低耦合的原则,以保证系统的可扩展性和可维护性。
本文从电脑配置、PyCharm版本、Java版本、配置文件以及程序冲突等多个角度分析了Win10启动不了PyCharm的可能原因,并提供了解决方法。
本文主要从多个角度分析了安装SQL Server 2012时可能出现的错误,并提供了解决方法。
Pycharm是一款非常优秀的Python集成开发环境,它可以让Python开发者更加高效地进行代码编写、调试和测试。在Pycharm中设置解释器非常简单,我们可以通过创建新项目、修改项目解释器、设置全局解释器等多种方式进行设置。
Python中有多种方法可以将字符串转换为整数,包括使用int()函数、try-except语句、正则表达式、map()函数、ord()函数和reduce()函数。在实际应用中,应根据具体情况选择最合适的方法。
本文介绍了导入CSV文件的多种方法,包括使用Excel、Python和R等工具。同时,还介绍了导入CSV文件时需要注意的一些细节和问题。CSV文件是数据处理和分析中不可或缺的一部分,希望本文能够对读者有所帮助。
mongodb是一种新型的数据库,它采用了面向文档的数据模型,具有灵活性、高性能和高可用性等优势。但是,mongodb也存在数据结构混乱、安全性和学习成本高等问题。
当Python运行不了时,我们应该从代码、Python环境、操作系统和硬件设备等多个角度来排查问题,并采取相应的解决措施。