爬取百度迁徙2021年春运迁徙数据(仅省份级别)
生活随笔
收集整理的這篇文章主要介紹了
爬取百度迁徙2021年春运迁徙数据(仅省份级别)
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
1.找出爬取的目標鏈接
在開發者工具(F12)里面NetWork->JS中找到服務器響應傳輸的js數據鏈接?
雙擊該網址就會彈出 ? 演示的的是2021年1月19日人口以北京市為起點,遷出至各個省份的比例,這個比例是占北京市遷出總人口的比例。2.找出鏈接規律
這里因為想做動態爬取,多點擊幾個就可以發現鏈接由以下幾部分組成: ? url = 'https://huiyan.baidu.com/migration/provincerank.jsonp?dt=province&id=' + Pcode + '&type=move_out&date=' + date + '&callback=jsonp_1628560725309_1040442' Pcode:是省份對應的省份編碼 type:遷出是move_out,遷入是move_in date:是日期字符串,例如202101193.程序與結果文件
emmm,在這里噠 PurpleBai/BAIDU (github.com) 我還做了城市級別的,但是我覺得沒有必要,因為基本上是差不多的呀。有什么不對歡迎留言,請多多指教!
總結
以上是生活随笔為你收集整理的爬取百度迁徙2021年春运迁徙数据(仅省份级别)的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: linux perl telnet安装,
- 下一篇: python 图片 变清晰_python