python讀寫不同編碼txt文件_python讀寫txt文件

以后整理規(guī)范

[python]?view plaincopy

import?os

import?codecs

filenames=os.listdir(os.getcwd())

out=file(“name.txt”,“w”)

for?filename?in?filenames:

out.write(filename.decode(“gb2312”).encode(“utf-8”))

out.close()

將執(zhí)行文件的當前目錄及文件名寫入到name.txt文件中，以utf-8格式保存

如果采用ANSI編碼保存，用如下代碼寫入即可：

[python]?view plaincopy

out.write(filename)

打開文件并寫入

引用codecs模塊，對該模塊目前不了解。在此記錄下方法，有空掌握該模塊功能及用法。

[python]?view plaincopy

import?codecs

file=codecs.open(“l(fā)ol.txt”,“w”,“utf-8”)

file.write(u“我”)

file.close()

讀取ANSI編碼的文本文件和utf-8編碼的文件

讀取ANSI編碼文件

建立一個文件test.txt，文件格式用ANSI，內(nèi)容為:

abc中文

用python來讀取

# coding=gbk

print open(“Test.txt”).read()

結(jié)果：abc中文

讀取utf-8編碼文件（無BOM）

把文件格式改成UTF-8：

結(jié)果：abc涓 枃

顯然，這里需要解碼：

# -*- coding: utf-8 -*-

import codecs

print open(“Test.txt”).read().decode(“utf-8”)

結(jié)果：abc中文

讀取utf-8編碼文件（有BOM）

某些軟件在保存一個以UTF-8編碼的文件時，默認會在文件開始的地方插入三個不可見的字符（0xEF 0xBB 0xBF，即BOM）。在有些軟件可以控制是否插入BOM。如果在有BOM的情況下，在讀取時需要自己去掉這些字符，python中的codecs module定義了這個常量：

[python]?view plaincopy

#?-*-?coding:?utf-8?-*-

import?codecs

data?=?open(“Test.txt”).read()

if?data[:3]?==?codecs.BOM_UTF8:

data?=?data[3:]

print?data.decode(“utf-8”)

結(jié)果：abc中文

在看下面的例子：

[python]?view plaincopy

#?-*-?coding:?utf-8?-*-

data?=?open(“name_utf8.txt”).read()

u=data.decode(“utf-8”)

print?u[1:]

打開utf-8格式的文件并讀取utf-8字符串后，解碼變成unicode對象。但是會把附加的三個字符同樣進行轉(zhuǎn)換，變成一個unicode字符。該字符不能被打印。所以為了正常顯示，采用u[1:]的方式，過濾到第一個字符。

注意：在處理unicode中文字符串的時候，必須首先對它調(diào)用encode函數(shù)，轉(zhuǎn)換成其它編碼輸出。

更多詳細內(nèi)容：http://eatsalt.blog.163.com/blog/static/87940266200941483413540/

設置python默認編碼

[python]?view plaincopy

import?sys

reload(sys)

sys.setdefaultencoding(“utf-8”)

print?sys.getdefaultencoding()

今天碰到了 python 編碼問題, 報錯信息如下

Traceback (most recent call last):

File “ntpath.pyc”, line 108, in join

UnicodeDecodeError: ‘a(chǎn)scii’ codec can’t decode byte 0xa1 in position 36: ordinal not in range(128)

顯然是當前的編碼為ascii, 無法解析0xa1(十進制為161, 超過上限128). 進入python console后, 發(fā)現(xiàn)默認編碼確實是 ascii, 驗證過程為:

在python2.6中無法調(diào)用sys.setdefaultencoding()函數(shù)來修改默認編碼，因為python在啟動的時候會調(diào)用site.py文件，在這個文件中設置完默認編碼后會刪除sys的setdefaultencoding方法。不能再被調(diào)用了.? 在確定sys已經(jīng)導入的情況下, 可以reload sys這個模塊之后, 再 sys.setdefaultencoding(‘utf8’)

[python]?view plaincopy

import?sys

reload(sys)

sys.setdefaultencoding(“utf-8”)

print?sys.getdefaultencoding()

確實有效, 根據(jù) limodou 講解,? site.py 是 python 解釋器啟動后, 默認加載的一個腳本. 如果使用 python -S 啟動的話, 將不會自動加載 site.py.

上面寫的挺啰嗦的.

==================================

如何永久地將默認編碼設置為utf-8呢?? 有2種方法:

==================================

第一個方法<不推薦>: 編輯site.py, 修改setencoding()函數(shù), 強制設置為 utf-8

第二個方法<推薦>: 增加一個名為 sitecustomize.py, 推薦存放的路徑為 site-packages 目錄下

sitecustomize.py 是在 site.py 被import 執(zhí)行的, 因為 sys.setdefaultencoding() 是在 site.py 的最后刪除的, 所以, 可以在 sitecustomize.py 使用 sys.setdefaultencoding().

import sys

sys.setdefaultencoding(‘utf-8’)

既然 sitecustomize.py 能被自動加載,? 所以除了設置編碼外, 也可以設置一些其他的東西

字符串的編碼

s1=’中文’

像上面那樣直接輸入的字符串是按照代碼文件的編碼來處理的，如果是unicode編碼，有以下三種方式：

1 s1 = u’中文’

2 s2 = unicode(‘中文’,’gbk’)

3 s3 = s1.decode(‘gbk’)

unicode是一個內(nèi)置函數(shù)，第二個參數(shù)指示源字符串的編碼格式。

decode是任何字符串具有的方法，將字符串轉(zhuǎn)換成unicode格式，參數(shù)指示源字符串的編碼格式。

encode也是任何字符串具有的方法，將字符串轉(zhuǎn)換成參數(shù)指定的格式。

喜歡 (0)or分享 (0)

總結(jié)

以上是生活随笔為你收集整理的python不同数据的读入_python读写不同编码txt文件_python读写txt文件的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。