Python—HTTP处理Gzip压缩数据

最新推荐文章于 2025-04-16 15:56:33 发布

转载最新推荐文章于 2025-04-16 15:56:33 发布 · 4.6k 阅读

标签

#python

收录于

python 专栏收录该内容

44 篇文章

订阅专栏

本文介绍如何使用Python处理HTTP请求中带有Gzip压缩的数据。通过设置Accept-encoding:gzip头部信息，可以让服务器返回Gzip压缩的内容。利用urllib2模块发起请求，并通过gzip模块解压数据。

开发板推荐：天空星STM32F407VET6开发板

超高性价比 STM32主控 | 超高主频 | 一板兼容百芯 | 比赛神器 | 沉金彩色丝印

点击查看

Python—HTTP处理Gzip压缩数据

HTTP 请求中包含 Accept-encoding: gzip 头信息可以告诉服务器，如果它有任何新数据要发送给我时，请以压缩的格式发送。如果服务器支持压缩，它将返回由 gzip 压缩的数据并且使用 Content-encoding: gzip 头信息标记。

#codeing:utf-8
import urllib2
import StringIO
import gzip
url = 'http://baidu.com'
request = urllib2.Request(url)
request.add_header('Accept-encoding', 'gzip')
opener = urllib2.build_opener()
f = opener.open(request)
isGzip = f.headers.get('Content-Encoding')
if isGzip=='gzip' :
    compresseddata = f.read()
    compressedstream = StringIO.StringIO(compresseddata)
    gzipper = gzip.GzipFile(fileobj=compressedstream)
    data = gzipper.read()
else:
    data = f.read()