国产探花免费观看_亚洲丰满少妇自慰呻吟_97日韩有码在线_资源在线日韩欧美_一区二区精品毛片,辰东完美世界有声小说,欢乐颂第一季,yy玄幻小说排行榜完本

首頁 > 編程 > Python > 正文

在Python中使用zlib模塊進行數(shù)據(jù)壓縮的教程

2019-11-25 17:15:54
字體:
供稿:網(wǎng)友

Python標(biāo)準(zhǔn)模塊中,有多個模塊用于數(shù)據(jù)的壓縮與解壓縮,如zipfile,gzip, bz2等等。上次介紹了zipfile模塊,今天就來講講zlib模塊。
zlib.compress(string[, level])
zlib.decompress(string[, wbits[, bufsize]])

zlib.compress用于壓縮流數(shù)據(jù)。參數(shù)string指定了要壓縮的數(shù)據(jù)流,參數(shù)level指定了壓縮的級別,它的取值范圍是1到9。壓縮速度與壓縮率成反比,1表示壓縮速度最快,而壓縮率最低,而9則表示壓縮速度最慢但壓縮率最高。zlib.decompress用于解壓數(shù)據(jù)。參數(shù)string指定了需要解壓的數(shù)據(jù),wbits和bufsize分別用于設(shè)置系統(tǒng)緩沖區(qū)大小(window buffer )與輸出緩沖區(qū)大小(output buffer)。下面用一個例子來演示如何使用這兩個方法:
 

#coding=gbk import zlib, urllib fp = urllib.urlopen('http://localhost/default.html')str = fp.read()fp.close() #---- 壓縮數(shù)據(jù)流。str1 = zlib.compress(str, zlib.Z_BEST_COMPRESSION)str2 = zlib.decompress(str1)print len(str)print len(str1)print len(str2) # ---- 結(jié)果#5783#1531#5783

我們也可以使用Compress/Decompress對象來對數(shù)據(jù)進行壓縮/解壓縮。zlib.compressobj([level]) 與zlib.decompress(string[, wbits[, bufsize]]) 分別創(chuàng)建Compress/Decompress縮對象。通過對象對數(shù)據(jù)進行壓縮和解壓縮的使用方式與上面介紹的zlib.compress,zlib.decompress非常類似。但兩者對數(shù)據(jù)的壓縮還是有區(qū)別的,這主要體現(xiàn)在對大量數(shù)據(jù)進行操作的情況下。假如現(xiàn)在要壓縮一個非常大的數(shù)據(jù)文件(上百M),如果使用zlib.compress來壓縮的話,必須先一次性將文件里的數(shù)據(jù)讀到內(nèi)存里,然后將數(shù)據(jù)進行壓縮。這樣勢必會戰(zhàn)用太多的內(nèi)存。如果使用對象來進行壓縮,那么沒有必要一次性讀取文件的所有數(shù)據(jù),可以先讀一部分數(shù)據(jù)到內(nèi)存里進行壓縮,壓縮完后寫入文件,然后再讀其他部分的數(shù)據(jù)壓縮,如此循環(huán)重復(fù),只到壓縮完整個文件。下面一個例子來演示這之間的區(qū)別:
 

#coding=gbk import zlib, urllib fp = urllib.urlopen('http://localhost/default.html')  # 訪問的到的網(wǎng)址。data = fp.read()fp.close() #---- 壓縮數(shù)據(jù)流str1 = zlib.compress(data, zlib.Z_BEST_COMPRESSION)str2 = zlib.decompress(str1)print '原始數(shù)據(jù)長度:', len(data)print '-' * 30print 'zlib.compress壓縮后:', len(str1)print 'zlib.decompress解壓后:', len(str2)print '-' * 30 #---- 使用Compress, Decompress對象對數(shù)據(jù)流進行壓縮/解壓縮com_obj = zlib.compressobj(zlib.Z_BEST_COMPRESSION)decom_obj = zlib.decompressobj() str_obj = com_obj.compress(data)str_obj += com_obj.flush()print 'Compress.compress壓縮后:', len(str_obj) str_obj1 = decom_obj.decompress(str_obj)str_obj1 += decom_obj.flush()print 'Decompress.decompress解壓后:', len(str_obj1)print '-' * 30 #---- 使用Compress, Decompress對象,對數(shù)據(jù)進行分塊壓縮/解壓縮。com_obj1 = zlib.compressobj(zlib.Z_BEST_COMPRESSION)decom_obj1 = zlib.decompressobj()chunk_size = 30; #原始數(shù)據(jù)分塊str_chunks = [data[i * chunk_size:(i + 1) * chunk_size] /  for i in range((len(data) + chunk_size) / chunk_size)] str_obj2 = ''for chunk in str_chunks:  str_obj2 += com_obj1.compress(chunk)str_obj2 += com_obj1.flush()print '分塊壓縮后:', len(str_obj2) #壓縮數(shù)據(jù)分塊解壓str_chunks = [str_obj2[i * chunk_size:(i + 1) * chunk_size] /  for i in range((len(str_obj2) + chunk_size) / chunk_size)]str_obj2 = ''for chunk in str_chunks:  str_obj2 += decom_obj1.decompress(chunk)str_obj2 += decom_obj1.flush()print '分塊解壓后:', len(str_obj2) # ---- 結(jié)果 ------------------------原始數(shù)據(jù)長度: 5783------------------------------zlib.compress壓縮后: 1531zlib.decompress解壓后: 5783------------------------------Compress.compress壓縮后: 1531Decompress.decompress解壓后: 5783------------------------------分塊壓縮后: 1531分塊解壓后: 5783

Python手冊對zlib模塊的介紹比較詳細,更具體的應(yīng)用,可以參考Python手冊。

發(fā)表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發(fā)表
主站蜘蛛池模板: 马公市| 离岛区| 鸡东县| 保康县| 百色市| 望谟县| 朝阳市| 石首市| 鹤壁市| 乾安县| 法库县| 酉阳| 崇义县| 洛川县| 滕州市| 葵青区| 黎城县| 武冈市| 门源| 九台市| 鹤岗市| 喀喇沁旗| 林甸县| 英吉沙县| 阳东县| 乐至县| 六枝特区| 张掖市| 苍溪县| 且末县| 武隆县| 东宁县| 资兴市| 汉中市| 宣化县| 乌审旗| 民丰县| 思南县| 施甸县| 上饶县| 定兴县|