色综合图-色综合图片-色综合图片二区150p-色综合图区-玖玖国产精品视频-玖玖香蕉视频

您的位置:首頁技術文章
文章詳情頁

Python內存映射文件讀寫方式

瀏覽:3日期:2022-07-27 16:52:38

我就廢話不多說了,還是直接看代碼吧!

import osimport timeimport mmap filename = ’test.txt’ #如果不存在,創建。if not os.path.exists(filename): open(filename, ’w’) print(os.path.isdir(filename))if os.path.isfile(filename): print(time.ctime(os.path.getctime(filename))) fd = os.open(filename, os.O_RDWR)m = mmap.mmap(fd, 50, access=mmap.ACCESS_WRITE) # 1024字節的文件。m.seek(2) buf1 = bytes(b’Zhang’)m[2:len(buf1)+2] = buf1 buf2 = b’Phil’ m.seek(20) # 定位寫入的位置。m.write(buf2) # 寫入字節數據。m.close() fd = os.open(filename, os.O_RDWR)m = mmap.mmap(fd, 50, access=mmap.ACCESS_READ)m.seek(20)buf3 = m.read(len(buf2))m.close()print(list(buf3))

操作后的test.txt文件內容:

Zhang Phil

補充知識:Python對二進制文件做內存映射,高效優雅地對內容隨機訪問

讀寫二進制文件還在使用open函數?

各種組合seek()、read()和write()累不累?

使用 mmap 模塊實現對文件的內存映射,讓我們讀寫二進制文件像操作數組一樣高效優雅。

先給出一個實用函數,用來演示如何打開一個文件并對它進行內存映射操作。

def memory_map(filename, access=mmap.ACCESS_WRITE): size = os.path.getsize(filename) fd = os.open(filename, os.O_RDWR) return mmap.mmap(fd, size, access=access)

要使用這個函數,需要先準備一個已經創建好的文件并為之填充一些數據。

>>> size = 1000000>>> with open(’data’,’wb’) as f: f.seek(size-1) f.write(b’x00’)

接著我們可以使用memory_map()函數對文件內容做內存映射,它返回的mmap對象可以讓我們像操作數組一樣讀寫二進制文件!

>>> m = memory_map(’data’)>>> len(m)1000000>>> m[:10]b’x00x00x00x00x00x00x00x00x00x00’>>> m[0]0>>> m[0:11]=b’Hello World’#改變一個切片>>> m.close()>>> with open(’data’,’rb’) as f:#驗證改變已經生效 print(f.read(11)) b’Hello World’

由于mmap()返回的mmap對象也可以當作上下文管理器使用,在這種情況下,底層的文件會自動關閉。

>>> with memory_map(’data’) as m: print(len(m)) print(m[0:11]) 1000000b’Hello World’

默認情況下memory_map()函數打開的文件既可以讀,也可以寫。對數據的任何修改都會拷貝回原始的文件中。

如果需要只讀訪問,可以為access參數提供mmap.ACCESS_READ值。

m = memory_map(filename, mmap.ACCESS_READ)

如果只想要在本地修改數據,并不想將這些修改寫回到原始文件中,可以使用mmap.ACCESS_COPY參數。

m = memory_map(filename, mmap.ACCESS_COPY)

總結:

通過mmap將文件映射到內存之后,我們可以高效并優雅地對文件的內容進行隨機訪問。

與其打開文件后通過組合各種seek()、read()和write()調用來訪問,不如簡單將文件映射到內存,然后通過切片操作來訪問數據。

需要強調的是,對某個文件進行內存映射并不會導致將整個文件讀到內存中。也就是說,文件并不會拷貝到某種內存緩沖區或數組上。相反,操作系統只是為文件內容保留一段虛擬內存而已。

當訪問文件的不同區域時,文件的這些區域將被讀取并按照需要映射到內存區域中。但是,文件中從未訪問過的部分會簡單地留在磁盤上。這一切都是以透明的方式在幕后完成的。

如果有多個Python解釋器對同一個文件做了內存映射,得到的mmap對象可以用來在解釋器之間交換數據。也就是說,所有的解釋器可以同時讀/寫數據,在一個解釋器中對數據做出的修改會自動反映到其他解釋器上。

雖然還需要一些額外的步驟來處理同步問題,但是有時候可以使用這種方法作為通過管道或者socket傳輸數據的替代方案。

以上這篇Python內存映射文件讀寫方式就是小編分享給大家的全部內容了,希望能給大家一個參考,也希望大家多多支持好吧啦網。

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 久久精品视频免费看 | 91看片淫黄大片.在线天堂 | 一级做a毛片免费视频 | 九九视频在线观看6 | 尹人成人 | 久久久久女人精品毛片 | 99ri在线观看 | 超清首页 国产 亚洲 丝袜 | 91理论片午午伦夜理片久久 | 伊人不卡| 久久久久久久久久毛片精品美女 | 国产网友自拍 | 国产精品18久久久久久小说 | 久久久国产精品视频 | 精品欧美一区二区在线观看 | 久爱免费观看在线网站 | 亚洲热视频 | 久久精品国产一区二区三区日韩 | 日韩中文字幕在线亚洲一区 | 国产三级精品三级国产 | 国产日韩欧美亚洲 | 在线观看中文字幕亚洲 | 亚洲精品国产精品一区二区 | 欧美精品videos| 国产在线视频一区 | 日本一区二区三区高清在线观看 | 操她视频网站 | 男女那个视频免费 | 国产成人毛片 | 91香蕉视频成人 | 国内精品久久久久久久久 | 日韩欧美在线精品 | 亚洲精品国产拍拍拍拍拍 | 国产成人免费福利网站 | 国产色啪午夜免费视频 | 一本色道久久88综合亚洲精品高清 | 国产91会所洗浴女技师按摩 | 成年人黄国产 | 久久精品免费在线观看 | 亚洲欧美综合国产精品一区 | 欧美成人 一区二区三区 |