Python編碼的知識點(diǎn)有哪些

這篇文章主要介紹“Python編碼的知識點(diǎn)有哪些”,在日常操作中,相信很多人在Python編碼的知識點(diǎn)有哪些問題上存在疑惑,小編查閱了各式資料,整理出簡單好用的操作方法,希望對大家解答”Python編碼的知識點(diǎn)有哪些”的疑惑有所幫助!接下來,請跟著小編一起來學(xué)習(xí)吧!

九龍坡網(wǎng)站制作公司哪家好,找成都創(chuàng)新互聯(lián)!從網(wǎng)頁設(shè)計(jì)、網(wǎng)站建設(shè)、微信開發(fā)、APP開發(fā)、響應(yīng)式網(wǎng)站開發(fā)等網(wǎng)站項(xiàng)目制作,到程序開發(fā),運(yùn)營維護(hù)。成都創(chuàng)新互聯(lián)于2013年開始到現(xiàn)在10年的時(shí)間,我們擁有了豐富的建站經(jīng)驗(yàn)和運(yùn)維經(jīng)驗(yàn),來保證我們的工作的順利進(jìn)行。專注于網(wǎng)站建設(shè)就選成都創(chuàng)新互聯(lián)。

1. Python 3 中 str 與 bytes

在 Python3中,字符串有兩種類型 ,str 和 bytes。

今天就來說一說這二者的區(qū)別:

  • unicode string(str 類型):以 Unicode code points 形式存儲,人類認(rèn)識的形式

  • byte string(bytes 類型):以 byte 形式存儲,機(jī)器認(rèn)識的形式

在 Python 3 中你定義的所有字符串,都是 unicode string類型,使用 type 和 isinstance 可以判別:

# python3  >>> str_obj = "你好" >>>  >>> type(str_obj) <class 'str'> >>>  >>> isinstance("你好", str) True >>>  >>> isinstance("你好", bytes) False >>>

而 bytes 是一個(gè)二進(jìn)制序列對象,你只要你在定義字符串時(shí)前面加一個(gè) b,就表示你要定義一個(gè) bytes 類型的字符串對象。

# python3 >>> byte_obj = b"Hello World!" >>> type(byte_obj) <class 'bytes'> >>>  >>> isinstance(byte_obj, str) False >>>  >>> isinstance(byte_obj, bytes) True >>>

但是在定義中文字符串時(shí),你就不能直接在前面加 b 了,而應(yīng)該使用 encode 轉(zhuǎn)一下。

>>> byte_obj=b"你好"   File "<stdin>", line 1 SyntaxError: bytes can only contain ASCII literal characters. >>>  >>> str_obj="你好" >>>  >>> str_obj.encode("utf-8") b'\xe4\xbd\xa0\xe5\xa5\xbd' >>>

2. Python 2 中 str 與 unicode

而在 Python2 中,字符串的類型又與 Python3 不一樣,需要仔細(xì)區(qū)分。

在 Python2 里,字符串也只有兩種類型,unicode 和 str 。

只有 unicode object 和 非unicode object(其實(shí)應(yīng)該叫 str object) 的區(qū)別:

  • unicode string(unicode類型):以 Unicode code points 形式存儲,人類認(rèn)識的形式

  • byte string(str 類型):以 byte 形式存儲,機(jī)器認(rèn)識的形式

當(dāng)我們直接使用雙引號或單引號包含字符的方式來定義字符串時(shí),就是 str 字符串對象,比如這樣:

# python2  >>> str_obj="你好" >>> >>> type(str_obj) <type 'str'> >>> >>> isinstance(str_obj, bytes) True >>> isinstance(str_obj, str) True >>>

而當(dāng)我們在雙引號或單引號前面加個(gè) u,就表明我們定義的是 unicode 字符串對象,比如這樣:

# python2  >>> unicode_obj = u"你好" >>> >>> type(unicode_obj) <type 'unicode'> >>> >>> isinstance(unicode_obj, bytes) False >>> isinstance(unicode_obj, str) False >>>

3. 如何檢測對象的編碼

所有的字符,在 unicode 字符集中都有對應(yīng)的編碼值(英文叫做:code point)。

而把這些編碼值按照一定的規(guī)則保存成二進(jìn)制字節(jié)碼,就是我們說的編碼方式,常見的有:UTF-8,GB2312 等。

也就是說,當(dāng)我們要將內(nèi)存中的字符串持久化到硬盤中的時(shí)候,都要指定編碼方法,而反過來,讀取的時(shí)候,也要指定正確的編碼方法(這個(gè)過程叫解碼),不然會出現(xiàn)亂碼。

那問題就來了,當(dāng)我們知道了其對應(yīng)的編碼方法,我們就可以正常解碼,但并不是所有時(shí)候我們都能知道應(yīng)該用什么編碼方式去解碼?

這時(shí)候就要介紹到一個(gè) python 的庫 -- chardet ,使用它之前 需要先安裝:

python3 -m pip install chardet

chardet 有一個(gè) detect 方法,可以 預(yù)測其其編碼格式:

>>> import chardet >>> chardet.detect('微信公眾號:Python編程時(shí)光'.encode('gbk')) {'encoding': 'GB2312', 'confidence': 0.99, 'language': 'Chinese'}

為什么說是預(yù)測呢,通過上面的輸出來看,你會看到有一個(gè) confidence 字段,其表示預(yù)測的可信度,或者說成功率。

但是使用它時(shí),若你的字符數(shù)較少,就有可能 “誤診”),比如只有 中文 兩個(gè)字,就像下面這樣,我們是 使用 gbk 編碼的,使用 chardet 卻識別成  KOI8-R 編碼。

>>> str_obj = "中文" >>> byte_obj = bytes(a, encoding='gbk')  # 先得到一個(gè) gbk 編碼的 bytes >>> >>> chardet.detect(byte_obj) {'encoding': 'KOI8-R', 'confidence': 0.682639754276994, 'language': 'Russian'} >>>  >>> strstr_obj2 = str(byte_obj, encoding='KOI8-R') >>> str_obj2 'жпнд'

所以為了編碼診斷的準(zhǔn)確,要盡量使用足夠多的字符。

chardet  支持多國的語言,從官方文檔中可以看到支持如下這些語言

Python編碼的知識點(diǎn)有哪些

4. 編碼與解碼的區(qū)別

編碼和解碼,其實(shí)就是 str 與 bytes 的相互轉(zhuǎn)化的過程(Python 2 已經(jīng)遠(yuǎn)去,這里以及后面都只用 Python 3  舉例)

  • 編碼:encode 方法,把字符串對象轉(zhuǎn)化為二進(jìn)制字節(jié)序列

  • 解碼:decode 方法,把二進(jìn)制字節(jié)序列轉(zhuǎn)化為字符串對象

Python編碼的知識點(diǎn)有哪些

Unicode & Character  Encodings in Python

那么假如我們真知道了其編碼格式,如何來轉(zhuǎn)成 unicode 呢?

有兩種方法:

第一種是,直接使用 decode 方法

>>> byte_obj.decode('gbk') '中文' >>>

第二種是,使用 str 類來轉(zhuǎn)

>>> strstr_obj = str(byte_obj, encoding='gbk') >>> str_obj '中文' >>>

5. 如何設(shè)置文件編碼

在 Python 2 中,默認(rèn)使用的是 ASCII 編碼來讀取的,因此,我們在使用 Python 2 的時(shí)候,如果你的 python  文件里有中文,運(yùn)行是會報(bào)錯(cuò)的。

SyntaxError: Non-ASCII character '\xe4' in file demo.py

原因就是 ASCII 編碼表太小,無法解釋中文。

而在 Python 3 中,默認(rèn)使用的是 uft-8 來讀取,所以省了不少的事。

對于這個(gè)問題,通常解決方法有兩種:

(1) 第一種方法

在 python2 中,可以使用在頭部指定

可以這樣寫,雖然很好看

# -*- coding: utf-8 -*-

但這樣寫太麻煩了,我通常使用下面兩種寫法

# coding:utf-8 # coding=utf-8

(2) 第二種方法

import sys   reload(sys)  sys.setdefaultencoding('utf-8')

這里在調(diào)用sys.setdefaultencoding(&lsquo;utf-8&rsquo;)  設(shè)置默認(rèn)的解碼方式之前,執(zhí)行了reload(sys),這是必須的,因?yàn)閜ython在加載完sys之后,會刪除 sys.setdefaultencoding  這個(gè)方法,我們需要重新載入sys,才能調(diào)用 sys.setdefaultencoding 這個(gè)方法。

到此,關(guān)于“Python編碼的知識點(diǎn)有哪些”的學(xué)習(xí)就結(jié)束了,希望能夠解決大家的疑惑。理論與實(shí)踐的搭配能更好的幫助大家學(xué)習(xí),快去試試吧!若想繼續(xù)學(xué)習(xí)更多相關(guān)知識,請繼續(xù)關(guān)注創(chuàng)新互聯(lián)網(wǎng)站,小編會繼續(xù)努力為大家?guī)砀鄬?shí)用的文章!

網(wǎng)站欄目:Python編碼的知識點(diǎn)有哪些
分享路徑:http://muchs.cn/article12/jsoigc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供搜索引擎優(yōu)化用戶體驗(yàn)、云服務(wù)器微信小程序、微信公眾號手機(jī)網(wǎng)站建設(shè)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

成都網(wǎng)站建設(shè)公司