Chuyển đổi gzip dữ liệu lấy bằng urllib2 sang HTML

Question

Tôi hiện sử dụng cơ giới hóa để đọc trang web đã giải nén như sau:

br = mechanize.Browser() 
br.set_handle_gzip(True) 
response = br.open(url) 
data = response.read() 

Tôi tự hỏi làm thế nào để giải nén dữ liệu đã giải nén lấy bằng urllib2 cho văn bản HTML?

req = urllib2.Request(url) 
opener = urllib2.build_opener() 
response = opener.open(req) 
data = response.read() 
if response.info()['content-encoding'] == 'gzip': 
    HOW TO DECOMPRESS DATA TO HTML 

Answer 1

Hãy thử điều này:

import StringIO 
data = StringIO.StringIO(data) 
import gzip 
gzipper = gzip.GzipFile(fileobj=data) 
html = gzipper.read() 

html bây giờ sẽ giữ HTML (In nó để xem). Xem here để biết thêm thông tin.

Answer 2

def ungzip(r,b): 
    headers = r.info() 
    if ('Content-Encoding' in headers.keys() and headers['Content-Encoding']=='gzip') or \ 
     ('content-encoding' in headers.keys() and headers['content-encoding']=='gzip'): 
     import gzip 
     gz = gzip.GzipFile(fileobj=r, mode='rb') 
     html = gz.read() 
     gz.close() 
     headers['Content-type'] = 'text/html; charset=utf-8' 
     r.set_data(html) 
     b.set_response(r)