為什么爬不到資料-有解無憂

import requests
from bs4 import BeautifulSoup

res = requests.get('https://music.163.com/#/artist?id=5771')
print(res.status_code)
html = res.text
soup = BeautifulSoup(html,'html.parser')
info = soup.find_all(class_='n-top50')
print(info)

uj5u.com熱心網友回復：

那是因為這些資料都是動態加載出來的，查看一下網頁源代碼就知道了。
想下載網易云音樂，可以看我的這篇博文啊！
https://blog.csdn.net/qq_45404396/article/details/105886268

uj5u.com熱心網友回復：

參考 1 樓持之以恒_liu 的回復:

那是因為這些資料都是動態加載出來的，查看一下網頁源代碼就知道了。
想下載網易云音樂，可以看我的這篇博文啊！
https://blog.csdn.net/qq_45404396/article/details/105886268

對于這種動態的網頁，怎么抓取？

uj5u.com熱心網友回復：

應該在xhr或者js檔案夾下面，但是要獲取這些資訊，網易云音樂好像是post請求吧！而且請求資料還是加了密的

uj5u.com熱心網友回復：

參考 2 樓 weixin_45903952的回復:

Quote: 參考 1 樓持之以恒_liu 的回復:

那是因為這些資料都是動態加載出來的，查看一下網頁源代碼就知道了。
想下載網易云音樂，可以看我的這篇博文啊！
https://blog.csdn.net/qq_45404396/article/details/105886268

對于這種動態的網頁，怎么抓取？

反正就是比較復雜

uj5u.com熱心網友回復：

參考 4 樓持之以恒_liu 的回復:

Quote: 參考 2 樓 weixin_45903952的回復:
Quote: 參考 1 樓持之以恒_liu 的回復:

那是因為這些資料都是動態加載出來的，查看一下網頁源代碼就知道了。
想下載網易云音樂，可以看我的這篇博文啊！
https://blog.csdn.net/qq_45404396/article/details/105886268

對于這種動態的網頁，怎么抓取？

反正就是比較復雜

看哪方面的書能解決，或大佬直接給個解法來學習一下

uj5u.com熱心網友回復：

參考 5 樓 weixin_45903952的回復:

Quote: 參考 4 樓持之以恒_liu 的回復:

Quote: 參考 2 樓 weixin_45903952的回復:
Quote: 參考 1 樓持之以恒_liu 的回復:

那是因為這些資料都是動態加載出來的，查看一下網頁源代碼就知道了。
想下載網易云音樂，可以看我的這篇博文啊！
https://blog.csdn.net/qq_45404396/article/details/105886268

對于這種動態的網頁，怎么抓取？

反正就是比較復雜

看哪方面的書能解決，或大佬直接給個解法來學習一下

我不是大佬，我只是在這個寒假學習的小白罷了，真的，寒假之前，對于爬蟲基本上一竅不通

uj5u.com熱心網友回復：

可以看看這位大佬的這篇博文，相信你對爬蟲會有更深的了解。
https://blog.csdn.net/liaoningxinmin/article/details/80794774

uj5u.com熱心網友回復：

參考 7 樓持之以恒_liu 的回復:

可以看看這位大佬的這篇博文，相信你對爬蟲會有更深的了解。
https://blog.csdn.net/liaoningxinmin/article/details/80794774

怎么樣提取文章這里的xHR呢，自動獲取網址？？

uj5u.com熱心網友回復：

參考 8 樓 weixin_45903952 的回復:

Quote: 參考 7 樓持之以恒_liu 的回復:

可以看看這位大佬的這篇博文，相信你對爬蟲會有更深的了解。
https://blog.csdn.net/liaoningxinmin/article/details/80794774

怎么樣提取文章這里的xHR呢，自動獲取網址？？

看看我寫的文章吧！
https://blog.csdn.net/qq_45404396/article/details/105875749
https://blog.csdn.net/qq_45404396/article/details/105471434

uj5u.com熱心網友回復：

參考 9 樓持之以恒_liu 的回復:

Quote: 參考 8 樓 weixin_45903952 的回復:

Quote: 參考 7 樓持之以恒_liu 的回復:

可以看看這位大佬的這篇博文，相信你對爬蟲會有更深的了解。
https://blog.csdn.net/liaoningxinmin/article/details/80794774

怎么樣提取文章這里的xHR呢，自動獲取網址？？

看看我寫的文章吧！
https://blog.csdn.net/qq_45404396/article/details/105875749
https://blog.csdn.net/qq_45404396/article/details/105471434

第二個還沒寫完？看不到內容呢

uj5u.com熱心網友回復：

參考 10 樓 weixin_45903952 的回復:

Quote: 參考 9 樓持之以恒_liu 的回復:

Quote: 參考 8 樓 weixin_45903952 的回復:

Quote: 參考 7 樓持之以恒_liu 的回復:

可以看看這位大佬的這篇博文，相信你對爬蟲會有更深的了解。
https://blog.csdn.net/liaoningxinmin/article/details/80794774

怎么樣提取文章這里的xHR呢，自動獲取網址？？

看看我寫的文章吧！
https://blog.csdn.net/qq_45404396/article/details/105875749
https://blog.csdn.net/qq_45404396/article/details/105471434

第二個還沒寫完？看不到內容呢

第二篇文章是我在另外一個平臺上寫的，這是一個鏈接

uj5u.com熱心網友回復：

參考 11 樓持之以恒_liu 的回復:

Quote: 參考 10 樓 weixin_45903952 的回復:

Quote: 參考 9 樓持之以恒_liu 的回復:

Quote: 參考 8 樓 weixin_45903952 的回復:

Quote: 參考 7 樓持之以恒_liu 的回復:

可以看看這位大佬的這篇博文，相信你對爬蟲會有更深的了解。
https://blog.csdn.net/liaoningxinmin/article/details/80794774

怎么樣提取文章這里的xHR呢，自動獲取網址？？

看看我寫的文章吧！
https://blog.csdn.net/qq_45404396/article/details/105875749
https://blog.csdn.net/qq_45404396/article/details/105471434

第二個還沒寫完？看不到內容呢

第二篇文章是我在另外一個平臺上寫的，這是一個鏈接

看到了

轉載請註明出處，本文鏈接：https://www.uj5u.com/qita/51260.html

標籤：腳本語言(Perl/Python)

上一篇：python如何將pdf里帶上下偏差的資料讀出來

下一篇：求助精通tensorflow的大佬幫我寫一個網路的測驗程式