我正在嘗試從 tradingview.com 獲取一個元素。具體這個鏈接。我想要我給我的程式的任何鏈接的符號的價格。我注意到在瀏覽 url 的元素時，我可以在這里找到股票的價格。
<div class="tv-symbol-price-quote__value js-symbol-last">
"3.065"
<span class>57851</span>
</div>
在下面運行此代碼時，我得到此輸出。
#This will not run on online IDE
import requests
from bs4 import BeautifulSoup
URL = "https://www.tradingview.com/symbols/NEARUSD/"
r = requests.get(URL)
soup = BeautifulSoup(r.content, 'html.parser') # If this line causes an error, run 'pip install html5lib' or install html5lib
L = [soup.find_all(class_ = "tv-symbol-price-quote__value js-symbol-last")]
print(L)
輸出
[[<div class="tv-symbol-price-quote__value js-symbol-last"></div>]]
我怎樣才能從這個網站上獲取整個價格？我想要 3.065 和 57851。
uj5u.com熱心網友回復：
您有最常見的問題：頁面用于JavaScript添加/更新元素但BeautifulSoup/ lxml, requests/urllib無法運行JS。您可能需要Selenium 來控制可以運行的真實網路瀏覽器JS。DevTools或在Firefox/ Chrome(tab ) 中使用（手動）Network查看是否JavaScript從某個 URL 讀取資料。并嘗試將此 URL 與requests. JS通常會得到JSON可以很容易地轉換為 Python 字典（沒有BS）。您還可以檢查頁面是否API為程式員提供（免費）。
使用DevTool我發現它使用 JavaScript 發送POST（帶有一些 JSON 資料）并且它得到了新的價格。
import requests
payload = {
"columns": ["market_cap_calc", "market_cap_diluted_calc", "total_shares_outstanding", "total_shares_diluted", "total_value_traded"],
"range": [0, 1],
"symbols": {"tickers": ["BINANCE:NEARUSD"]}
}
url = 'https://scanner.tradingview.com/crypto/scan'
response = requests.post(url, json=payload)
print(response.text)
data = response.json()
print(data['data'][0]["d"][1]/1_000_000_000)
結果：
{"totalCount":1,"data":[{"s":"BINANCE:NEARUSD","d":[2507704855.0467912,3087555230,812197570,1000000000,106737372.9550421]}]}
3.08755523
編輯：
上面的代碼似乎只給出了market cap. 頁面用于websocket每隔幾秒鐘獲取一次新價格。
wss://data.tradingview.com/socket.io/websocket?from=symbols/NEARUSD/&date=2022_10_17-11_33
這將需要更復雜的代碼。
其他答案（使用 Selenium）為您提供正確的價值。
uj5u.com熱心網友回復：
網頁內容由 JavaScript 動態加載。因此，您必須使用諸如 selenium 或隱藏 API 之類的自動化工具。
在這里，我使用 selenium 和 bs4 來獲取所需的動態內容。
import time
from selenium import webdriver
from bs4 import BeautifulSoup
from selenium.webdriver.chrome.service import Service
webdriver_service = Service("./chromedriver") #Your chromedriver path
driver = webdriver.Chrome(service=webdriver_service)
url= "https://www.tradingview.com/symbols/NEARUSD/"
driver.get(url)
driver.maximize_window()
time.sleep(5)
soup = BeautifulSoup(driver.page_source,"lxml")
price = soup.find('div',class_ = "tv-symbol-price-quote__value js-symbol-last").get_text(strip=True)
print(price)
輸出：
3.07525163
轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/518199.html