Python文件讀寫、StringIO和BytesIO

文件讀寫

讀文件

with open('/path/filename', 'r') as f:
    print(f.read())

調用read()會一次性讀取文件的全部內容，如果文件有10G，內存就爆了，所以，為保險起見，可以反復調用read(size)方法，每次最多讀取size個字節的內容

另外，調用readline()可以每次讀取一行內容，調用readlines()一次讀取所有內容並按行返回list。因此，要根據需要決定怎么調用

with open('\path\to\file', 'r') as f:
    for line in f.readlines():
        print(line.strip())         # 把末尾的'\n'刪掉

前面講的默認都是讀取文本文件，並且是UTF-8編碼的文本文件。要讀取二進制文件，比如圖片、視頻等等，用'rb'模式打開文件即可

寫文件

with open('/path/filename', 'w') as f:
    f.write('Hello, world!')

 

StringIO和BytesIO

很多時候，數據讀寫不一定是文件，也可以在內存中讀寫。StringIO就是在內存中讀寫str。

要把str寫入StringIO，我們需要先創建一個StringIO，然后，像文件一樣寫入即可：

>>> from io import StringIO
>>> f = StringIO()
>>> f.write('hello')
5
>>> f.write(' ')
1
>>> f.write('world!')
6
>>> print(f.getvalue())
hello world!

getvalue()方法用於獲得寫入后的str。

要讀取StringIO，可以用一個str初始化StringIO，然后，像讀文件一樣讀取：

>>> from io import StringIO
>>> f = StringIO('Hello!\nHi!\nGoodbye!')
>>> while True:
...     s = f.readline()
...     if s == '':
...         break
...     print(s.strip())

Hello!
Hi!
Goodbye!

StringIO操作的只能是str，如果要操作二進制數據，就需要使用BytesIO

BytesIO實現了在內存中讀寫bytes，我們創建一個BytesIO，然后寫入一些bytes：

>>> from io import BytesIO
>>> f = BytesIO()
>>> f.write('中文'.encode('utf-8'))
6
>>> print(f.getvalue())
b'\xe4\xb8\xad\xe6\x96\x87'

注意，寫入的不是str，而是經過UTF-8編碼的bytes。

和StringIO類似，可以用一個bytes初始化BytesIO，然后，像讀文件一樣讀取：

>>> from io import BytesIO
>>> f = BytesIO(b'\xe4\xb8\xad\xe6\x96\x87')
>>> f.read()
b'\xe4\xb8\xad\xe6\x96\x87'

StringIO和BytesIO是在內存中操作str和bytes的方法，使得和讀寫文件具有一致的接口。