re.encoding='utf-8'

3. requests的text() 跟 content() 有什么区别
re.text返回的是处理过的Unicode型的数据，
而使用re.content返回的是bytes型的原始数据。
4. 爬虫拿到的HTML和浏览器中的源码不相同时
通过下载源码对比


import requests
url = 'https://www.xxx.net/html/gndy/dyzz/index.html'
r = requests.get(url)
r.encoding = r.apparent_encoding
html = r.text
with open('test.html','w',encoding='utf8') as f:
f.write(html)




 
到此这篇关于python3中编码获取网页的实例方法的文章就介绍到这了,更多相关python3中编码如何获取网页内容请搜索python博客以前的文章或继续浏览下面的相关文章希望大家以后多多支持python博客！