流畅的python是python3吗_流畅的 Python - 3. 文本与
對于字符串,我們接觸得挺多的。而編碼問題,也不時令人頭疼的。
由于一開始接觸的就是 Python3,所以一些在 Python2 上的編碼上的坑我沒遇到,甚至在 Python3 上都很少遇到編碼問題,因為 Python3 默認的編碼是 utf-8,而之前又從 Windows 轉到了 Arch,編碼問題已經很少遇到了。
不過還是要重新認識一下字符與字節。字節可由指定字符串編碼得到,是不可變類型。使用下標獲取字節的值時,返回的是整數。這個是沒想到的。很多適用于 str 對象的方法也適用于 bytes 對象。
struct 模塊提供了一些函數可把字節序列與其他不同的類型互相轉換。memoryview 用于共享內存,前面剛碰到過。
除了 utf-8 編碼,Python 還內置了許多其他的編碼器。不同編碼器編碼的相同的字符,最終的字節大小可能會不同。
對于?UnicodeEncodeError 和?UnicodeDecodeError,是由于對應編碼不能處理字符串 / 字節導致的。而?SyntaxError,則是由于沒有聲明編碼,平臺編碼不能處理對應模塊的 .py 文件。
在處理文件文件時,建議是指定編碼打開或寫入,不然跨操作系統運行腳本可能會出錯。
之后,講到了規范化 Unicode 字符串。之前是一直沒想過這樣的問題,一些特殊字符,該怎么搜索?這里給出了答案,那就是使用?unicodedata.normalize 函數提供的
Unicode 規范化。它有四個參數:NFC、NFD、NFKC和NFKD。NFC(Normalization Form C)使用最少的碼位構成等價的字符串,而?NFD 把組合字符分解成基字符和單獨的組合字符。
在另外兩個規范化形式(NFKC 和 NFKD)的首字母縮略詞中,字母 K 表示“compatibility”(兼容性)。
一般使用 NFC 保存字符串。后兩種轉換會有格式損失,但在搜索中卻很有用。
還有就是大小寫折疊,不僅僅是忽略大小寫,而且把其他一些符號改變。書上還介紹了一規范化——把變音符號去掉。
對 Unicode 字符的排序,可使用 key 關鍵字參數獲得我們想要的排序結果。之后就是 Unicode 數據庫,里面保存了各種關于 Unicode 的消息。
最后是雙模 API,同一函數能接受字符串和字節進行操作。
書上很多問題都沒怎么遇到,也沒想到會這么復雜,不過相信以后會接觸到的。慢慢消化吧。
總結
以上是生活随笔為你收集整理的流畅的python是python3吗_流畅的 Python - 3. 文本与的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 设置VS2017背景图片
- 下一篇: Python HackerRank 刷题