日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程语言 > python >内容正文

python

pythonGB2312乱码问题

發布時間:2025/4/14 python 15 豆豆
生活随笔 收集整理的這篇文章主要介紹了 pythonGB2312乱码问题 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

unc = stringa.decode("gb2312")

print unc.encode("utf-8")


LovelyPython中的通用解決方案,使用chardet模塊,該模塊是用來檢測目標編碼的

[python]?view plaincopy
  • import?chardet,?os??
  • ??
  • def?_smartCode(item):??
  • ????codedetect?=?chardet.detect(item)["encoding"]??
  • ????print?codedetect??
  • ????try:??
  • ????????print?item??
  • ????????item?=?unicode(item,?codedetect)??
  • ????????print?item??
  • ????????return?item.encode("utf-8")??
  • ????except:??
  • ????????return?u"bad?unicode?encode?try!"??
  • ??

    ?

    為什么會報錯“UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128)”?本文就來研究一下這個問題。


    字符串在Python內部的表示是unicode?編碼,因此,在做編碼轉換時,通常需要以unicode作為中間編碼,即先將其他編碼的字符串解碼(decode)成unicode,再從unicode編碼(encode)成另一種編碼。

    decode的作用是將其他編碼的字符串轉換成unicode編碼,如str1.decode('gb2312'),表示將gb2312編碼的字符串str1轉換成unicode編碼。

    encode的作用是將unicode編碼轉換成其他編碼的字符串,如str2.encode('gb2312'),表示將unicode編碼的字符串str2轉換成gb2312編碼。

    因此,轉碼的時候一定要先搞明白,字符串str是什么編碼,然后decode成unicode,然后再encode成其他編碼


    代碼中字符串的默認編碼與代碼文件本身的編碼一致?。

    如:s='中文'

    如果是在utf8的文件中,該字符串就是utf8編碼,如果是在gb2312的文件中,則其編碼為gb2312。這種情況下,要進行編碼轉換,都需要先用decode方法將其轉換成unicode編碼,再使用encode方法將其轉換成其他編碼。通常,在沒有指定特定的編碼方式時,都是使用的系統默認編碼創建的代碼文件。

    如果字符串是這樣定義:s=u'中文'

    則該字符串的編碼就被指定為unicode了,即python的內部編碼,而與代碼文件本身的編碼無關。因此,對于這種情況做編碼轉換,只需要直接使用encode方法將其轉換成指定編碼即可。


    如果一個字符串已經是unicode了,再進行解碼則將出錯,因此通常要對其編碼方式是否為unicode進行判斷:

    isinstance(s, unicode) #用來判斷是否為unicode

    用非unicode編碼形式的str來encode會報錯


    如何獲得系統的默認編碼??

    #!/usr/bin/env python
    #coding=utf-8
    import sys
    print sys.getdefaultencoding()

    該段程序在英文WindowsXP?上輸出為:ascii


    在某些IDE中,字符串的輸出總是出現亂碼,甚至錯誤,其實是由于IDE的結果輸出控制臺自身不能顯示字符串的編碼,而不是程序本身的問題。

    如在UliPad中運行如下代碼:

    s=u"中文"
    print s

    會提示:UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128)。這是因為UliPad在英文WindowsXP?上的控制臺信息輸出窗口是按照ascii編碼輸出的(英文系統的默認編碼是ascii),而上面代碼中的字符串是Unicode編碼的,所以輸出時產生了錯誤。

    將最后一句改為:print s.encode('gb2312')

    則能正確輸出“中文”兩個字。

    若最后一句改為:print s.encode('utf8')

    則輸出:/xe4/xb8/xad/xe6/x96/x87,這是控制臺信息輸出窗口按照ascii編碼輸出utf8編碼的字符串的結果。


    unicode(str,'gb2312')與str.decode('gb2312')是一樣的,都是將gb2312編碼的str轉為unicode編碼

    使用str.__class__可以查看str的編碼形式


    原理說了半天,最后來個包治百病的吧:)

    復制代碼?代碼如下:


    #!/usr/bin/env python?
    #coding=utf-8?
    s="中文"?
    if isinstance(s, unicode):?
    #s=u"中文"?
    print s.encode('gb2312')?
    else:?
    #s="中文"?
    print s.decode('utf-8').encode('gb2312')

    ?


    ?

    對于Python的初學者來說,處理漢字估計是最頭疼的一件事了,我也算是個初學者,斷斷續續接觸Python也有一年多了,最近才終于搞明白了Python里對多字節字符的處理是怎么回事。

    其實Python里對編碼的處理能力還是很強大的,只是需要理解它處理字符的方式。Python里有兩種字符串,str和unicode,他們都是字符的序列(相當于字符數組),區別在于字符的不同,str里一個字符就是一個字節,unicode中的一個字符是一個unicode里的字,長度可能是2字節,也可能是4字節。

    Unicode是Python對多字節字符使用的一種內部編碼,也就是說在Python內部處理多字節字符的官方編碼,但它并不是我們常見的utf-8,具體是什么編碼我也不清楚。在Python里處理字符串時,都需要先將來自文件、網絡、或者str的字符串轉換成Unicode格式,這一步是通過unicode工廠函數或者str的decode方法(decode可以理解為是從一種被編碼的二進制字節流解碼為Python內部通用的格式),但這是Python并不知道這個外部格式到底是什么格式,decode方法可以傳入一個參數,表示這個數據是什么編碼。

    得到Unicode對象后,就可以對字符串進行各種操作了。在完成操作,要把字符串輸出到文件、網絡、或者數據庫的時候,就要根據需要再把Unicode轉換成需要的目標編碼了,這是就要用到encode方法了,將字符串編碼成需要的格式

    總結

    以上是生活随笔為你收集整理的pythonGB2312乱码问题的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。