python爬取网页有乱码怎么解决_Python爬取网页requests乱码
**之前有在裁判文書上爬取數據,這段時間重新運行爬蟲后發現無法獲取網頁數據,
找了一下發現requests網頁源碼返回的是亂碼**
(如下截取一部分返回的數據:
不知道是不是網站對網頁內容進行了加密,請問如何解決這個問題?謝謝!
截取部分程序源碼:
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.104 Safari/537.36',
'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
'Accept-Language': 'zh-TW,zh;q=0.8,en-US;q=0.6,en;q=0.4',
'Accept-Encoding': 'gzip, deflate',
'Connection': 'keep-alive',
'Content-Type': 'text/html; charset=utf-8'}
html = requests.post('http://wenshu.court.gov.cn/List/ListContent', data=data, headers=headers)
print(html.text)
但是在審查元素里返回應該返回的數據,請問這哪里出現了問題?
之前程序正常運行時返回的數據是這樣的:
創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎總結
以上是生活随笔為你收集整理的python爬取网页有乱码怎么解决_Python爬取网页requests乱码的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: echars显示折点数据_数据可视化的基
- 下一篇: python深浅拷贝 面试_Python