Python学习笔记:IO编程StringIO和BytesIO
前言
最近在學(xué)習(xí)深度學(xué)習(xí),已經(jīng)跑出了幾個模型,但Pyhton的基礎(chǔ)不夠扎實,因此,開始補(bǔ)習(xí)Python了,大家都推薦廖雪峰的課程,因此,開始了學(xué)習(xí),但光學(xué)有沒有用,還要和大家討論一下,因此,寫下這些帖子,廖雪峰的課程連接在這里:廖雪峰
Python的相關(guān)介紹,以及它的歷史故事和運(yùn)行機(jī)制,可以參見這篇:python介紹
Python的安裝可以參見這篇:Python安裝
Python的運(yùn)行模式以及輸入輸出可以參見這篇:Python IO
Python的基礎(chǔ)概念介紹,可以參見這篇:Python 基礎(chǔ)
Python字符串和編碼的介紹,可以參見這篇:Python字符串與編碼
Python基本數(shù)據(jù)結(jié)構(gòu):list和tuple介紹,可以參見這篇:Python list和tuple
Python控制語句介紹:ifelse,可以參見這篇:Python 條件判斷
Python控制語句介紹:循環(huán)實現(xiàn),可以參見這篇:Python循環(huán)語句
Python數(shù)據(jù)結(jié)構(gòu):dict和set介紹Python數(shù)據(jù)結(jié)構(gòu)dict和set
Python函數(shù)相關(guān):Python函數(shù)
Python高階特性:Python高級特性
Python高階函數(shù):Python高階函數(shù)
Python匿名函數(shù):Python匿名函數(shù)
Python裝飾器:Python裝飾器
Python偏函數(shù):Python偏函數(shù)
Python模塊:Python模塊
Python面向?qū)ο缶幊?#xff08;1):Python面向?qū)ο?
Python面向?qū)ο缶幊?#xff08;2):Python面向?qū)ο?#xff08;2)
Python面向?qū)ο缶幊?#xff08;3):Python面向?qū)ο?#xff08;3)
Python面向?qū)ο缶幊?#xff08;4):Pyhton面向?qū)ο?#xff08;4)
Python面向?qū)ο蟾呒壘幊?#xff08;上):Python面向?qū)ο蟾呒壘幊?#xff08;上)
Python面向?qū)ο蟾呒壘幊?#xff08;中上):Python面向?qū)ο蟾呒壘幊?#xff08;中上)
Python面向?qū)ο蟾呒壘幊?#xff08;中下):Python面向?qū)ο蟾呒壘幊?#xff08;中下)
Python面向?qū)ο蟾呒壘幊?#xff08;完):Python面向?qū)ο蟾呒壘幊?#xff08;完)
Python錯誤調(diào)試(起):Python調(diào)試:起
Python錯誤調(diào)試(承):Python調(diào)試:承
Python錯誤調(diào)試(轉(zhuǎn)):Python調(diào)試:轉(zhuǎn)
Python錯誤調(diào)試(合):python調(diào)試:合
Python文件IO編程:Python文件IO
目錄:
- 前言
- 基本I/O編程流
- StringIO
- BytesIO
- 小結(jié)
- 命令行操作文件和目錄
- 環(huán)境變量
- 操作文件和目錄
- 小結(jié)
- 練習(xí)
基本I/O編程流
StringIO
很多時候,數(shù)據(jù)讀寫不一定要經(jīng)過文件接口這個渠道,還可以直接在內(nèi)存中讀寫(很明顯的優(yōu)點是速度更快)。
StringIO顧名思義就是在內(nèi)存中讀寫str。
要把str寫入StringIO,我們需要先創(chuàng)建一個StringIO,然后,像文件一樣寫入即可:
getvalue()方法用于獲得寫入后的str。
要讀取StringIO,可以用一個str初始化StringIO,然后,像讀文件一樣讀取:
BytesIO
StringIO操作的只能是str,如果要操作二進(jìn)制數(shù)據(jù),就需要使用BytesIO。
BytesIO實現(xiàn)了在內(nèi)存中讀寫bytes,我們創(chuàng)建一個BytesIO,然后寫入一些bytes:
請注意,寫入的不是str,而是經(jīng)過UTF-8編碼的bytes。
和StringIO類似,可以用一個bytes初始化BytesIO,然后,像讀文件一樣讀取:
小結(jié)
StringIO和BytesIO是在內(nèi)存中操作str和bytes的方法,使得和讀寫文件具有一致的接口。
命令行操作文件和目錄
如果我們要操作文件、目錄,可以在命令行下面輸入操作系統(tǒng)提供的各種命令來完成。比如dir、cp等命令。
如果要在Python程序中執(zhí)行這些目錄和文件的操作怎么辦?其實操作系統(tǒng)提供的命令只是簡單地調(diào)用了操作系統(tǒng)提供的接口函數(shù),Python內(nèi)置的os模塊也可以直接調(diào)用操作系統(tǒng)提供的接口函數(shù)。
打開Python交互式命令行,我們來看看如何使用os模塊的基本功能:
如果是posix,說明系統(tǒng)是Linux、Unix或Mac OS X,如果是nt,就是Windows系統(tǒng)。
要獲取詳細(xì)的系統(tǒng)信息,可以調(diào)用uname()函數(shù):
注意uname()函數(shù)在Windows上不提供,也就是說,os模塊的某些函數(shù)是跟操作系統(tǒng)相關(guān)的。
環(huán)境變量
在操作系統(tǒng)中定義的環(huán)境變量,全部保存在os.environ這個變量中,可以直接查看:
>>> os.environ environ({'VERSIONER_PYTHON_PREFER_32_BIT': 'no', 'TERM_PROGRAM_VERSION': '326', 'LOGNAME': 'michael', 'USER': 'michael', 'PATH': '/usr/bin:/bin:/usr/sbin:/sbin:/usr/local/bin:/opt/X11/bin:/usr/local/mysql/bin', ...})要獲取某個環(huán)境變量的值,可以調(diào)用os.environ.get(‘key’):
>>> os.environ.get('PATH') ''C:\\Program Files\\NVIDIA GPU Computing Toolkit\\CUDA\\v9.2\\bin;C:\\Program Files\\NVIDIA GPU Computing Toolkit\\CUDA\\v9.2\\libnvvp;C:\\Program Files\\NVIDIA GPU Computing Toolkit\\CUDA\\v9.0\\bin;' >>> os.environ.get('x', 'default') 'default'操作文件和目錄
操作文件和目錄的函數(shù)一部分放在os模塊中,一部分放在os.path模塊中,這一點要注意一下。
查看、創(chuàng)建和刪除目錄可以這么調(diào)用:
把兩個路徑合成一個時,不要直接拼字符串,而要通過os.path.join()函數(shù),這樣可以正確處理不同操作系統(tǒng)的路徑分隔符。在Linux/Unix/Mac下,os.path.join()返回這樣的字符串,
part-1/part-2
而windows下會返回這樣的字符串:
同樣的道理,要拆分路徑時,也不要直接去拆字符串,而要通過os.path.split()函數(shù),這樣可以把一個路徑拆分為兩部分,后一部分總是最后級別的目錄或文件名:
>>> os.path.split('/Users/michael/testdir/file.txt') ('/Users/michael/testdir', 'file.txt') os.path.splitext()可以直接讓你得到文件擴(kuò)展名,很多時候非常方便: >>> os.path.splitext('/path/to/file.txt') ('/path/to/file', '.txt')這些合并、拆分路徑的函數(shù)并不要求目錄和文件要真實存在,它們只對字符串進(jìn)行操作。
文件操作使用下面的函數(shù)。假定當(dāng)前目錄下有一個test.txt文件:
# 對文件重命名: >>> os.rename('test.txt', 'test.py') # 刪掉文件: >>> os.remove('test.py')但是復(fù)制文件的函數(shù)居然在os模塊中不存在!原因是復(fù)制文件并非由操作系統(tǒng)提供的系統(tǒng)調(diào)用。理論上講,我們通過上一節(jié)的讀寫文件可以完成文件復(fù)制,只不過要多寫很多代碼。
幸運(yùn)的是shutil模塊提供了copyfile()的函數(shù),你還可以在shutil模塊中找到很多實用函數(shù),它們可以看做是os模塊的補(bǔ)充。
最后看看如何利用Python的特性來過濾文件。比如我們要列出當(dāng)前目錄下的所有目錄,只需要一行代碼:
>>> [x for x in os.listdir('.') if os.path.isdir(x)] ['.lein', '.local', '.m2', '.npm', '.ssh', '.Trash', '.vim', 'Applications', 'Desktop', ...]要列出所有的.py文件,也只需一行代碼:
>>> [x for x in os.listdir('.') if os.path.isfile(x) and os.path.splitext(x)[1]=='.py'] 'check_exampe.py', 'exampes_triangles_2.py', 'exampe_high.py', 'exampe_mapreduce.py', 'exampe_re3.py', 'example_.py', 'example_byteIO.py', 'example_decorator.py', 'example_decorator2.py', 'example_decorator3.py', 'example_decorator4.py', 'example_doctest.py', 'example_doctest2.py', 'example_download.py', 'example_download2.py', 'example_fact.py', 'example_filter1.py', 'example_filter2.py', 'example_filter3.py', 'example_find.py', 'example_function.py', 'example_generator.py', 'example_Hanno.py', 'example_IO1.py', 'example_Io2.py', 'example_IO3.py', 'example_IO4.py', 'example_listgenerater.py', 'example_mapreduce.py', 'example_module1.py', 'example_module2.py', 'example_month_2.py', 'example_Multifunc.py', 'example_mydict.py', 'example_mytest.py', 'example_normalize.py', 'example_one.py', 'example_oop1.py', 'example_oop10.py', 'example_oop11.py', 'example_oop12.py', 'example_oop13.py', 'example_oop14.py', 'example_oop15.py', 'example_oop16.py', 'example_oop17.py', 'example_oop18.py', 'example_oop2.py', 'example_oop3.py', 'example_oop4.py', 'example_oop5.py', 'example_oop6.py', 'example_oop7.py', 'example_oop8.py', 'example_oop9.py', 'example_power.py', 'example_power1.py', 'example_print.py', 'example_print2.py', 'example_re.py', 'example_re2.py', 'example_re3.py', 'example_re4.py', 'example_reduce.py', 'example_reduce2.py', 'example_sorted.py', 'example_strip.py', 'example_test1.py', 'example_test2.py', 'example_test3.py', 'example_test4.py', 'example_test5.py', 'example_test6.py', 'example_test7.py', 'example_triangles.py', 'example_variable.py', 'generator_check.py']是不是非常簡潔?
小結(jié)
Python的os模塊封裝了操作系統(tǒng)的目錄和文件操作,要注意這些函數(shù)有的在os模塊中,有的在os.path模塊中。
練習(xí)
1 利用os模塊編寫一個能實現(xiàn)dir -l輸出的程序。
2 編寫一個程序,能在當(dāng)前目錄以及當(dāng)前目錄的所有子目錄下查找文件名包含指定字符串的文件,并打印出相對路徑。
import osdef findfile(path,filename):for x in os.listdir(path):x=os.path.join(path,x)if os.path.isdir(x):findfile(x,filename)else:if filename in os.path.split(x)[1]:print(x)return filename=input('請輸入要查找的文件名:') findfile(os.path.abspath('.'),filename)總結(jié)
以上是生活随笔為你收集整理的Python学习笔记:IO编程StringIO和BytesIO的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Python学习笔记:I/O编程
- 下一篇: Python学习笔记:Io编程序列化