python网易云_用python爬虫爬取网易云音乐
標簽:
使用python爬蟲爬取網易云音樂
需要使用的模塊
只需要requests模塊和os模塊即可
開始工作
先去網易云音樂網頁版找一下你想要聽的歌曲點擊進去。按鍵盤F12打開網頁調試工具,點擊Network就可以查看網絡請求的相關信息,選擇XHR,然后可以看到一個.mp3結尾的請求:
直覺告訴我,這個.mp3就是這首歌曲,點擊請求,可以看到在General欄下面有Request URL,這個url就是這個歌曲的原始套接字所在的地方了,可以打開這個URL看看。
可以看到,這個網頁很明顯就是一個播放器的樣子,再按F12看看這個界面的Network(什么東西都沒有的話按F5刷新一下),這個界面點擊All才可以看到一個.mp3結尾的文件,對比一下它的General中的Request URL和這個網站的URL,其實是一樣的:
那么,這就算是正是找到了這個歌曲的url,現在要做的就是將這個url原始套接字從服務器上下載下來,代碼,起:
import requests
import os
headers={
"Accept": "*/*",
"Accept-Encoding": "identity;q=1, *;q=0",
"Accept-Language": "zh-CN,zh;q=0.9",
"Connection": "keep-alive",
"Host": "m10.music.126.net",
"Range": "bytes=0-",
"Referer": "https://m10.music.126.net/20181127170556/ff68375e7e70bb7dcda8fcc6a572951b/ymusic/c7bc/455e/612c/0d891c5408be6d0af16c7fa64945de75.mp3",
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36"
}
def download_musics(dir_,arcurl,filename):
os.mkdir(os.path.join(dir_,filename))
print("正在下載%s" %filename)
size=0
session=requests.Session()
response=session.get(arcurl,headers=headers,stream=True)
chunk_size=1025*400
content_size=int(response.headers['content-length'])
filepath=os.path.join(dir_,filename,filename+'.mp3')
print(content_size)
if response.status_code==206:
with open(filepath,'wb') as file:
for data in response.iter_content(chunk_size=chunk_size):
file.write(data)
size+=len(data)
file.flush()
print('下載進度:%.2f%%\n'%(float(size/content_size*100)))
if size/content_size==1:
print("complete download")
else:
print("連接異常")
if __name__=="__main__":
dir_="E:\python小爬蟲\download_music"
#這個網址會不停的變化,舊網址會失效
arcurl="https://m10.music.126.net/20181127181327/8a4190b05a43e70fb543ad1b824a21a4/ymusic/c7bc/455e/612c/0d891c5408be6d0af16c7fa64945de75.mp3"
filename="popstar"
download_musics(dir_,arcurl,filename)
這里需要注意幾點:
1、headers的值必須從后面打開的那個網頁上的Network找,要么會導致請求的信息不完整。
2、每首歌曲的url是不同的,而且,隨著時間的變化,同一首歌曲的url也會發生改變。所以在下載之前一定要再去看一次當前的url是什么。
運行結果
標簽:
來源: https://blog.csdn.net/qq_41427568/article/details/84570302
總結
以上是生活随笔為你收集整理的python网易云_用python爬虫爬取网易云音乐的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 怎么找到项目中所有同名的类_26岁转行程
- 下一篇: python爬虫实例手机_Python爬