def getRelateKeywords(requestUrl):

url = requestUrl.replace(' ', '%20');

page_encode = "gbk"

request = urllib2.Request(url)

request.add_header("Accept-encoding", "gzip")

usock = urllib2.urlopen(request)

page = usock.read()

if usock.headers.get('content-encoding', None) == 'gzip':

page = gzip.GzipFile(fileobj=StringIO.StringIO(page)).read()

if not isinstance(page, unicode):

page = unicode(page, page_encode)

#print(page)

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。