所以我想用網路刮刀從書店列出書籍。我需要書名和作者。我可以很好地獲得標題。問題出在作者身上。即標題類別相同，資料不同。如果我運行腳本，它會復制資料以及我不需要的資料（書籍代碼、出版商、年份等）
這是腳本`
import requests
from bs4 import BeautifulSoup
headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/107.0.0.0 Safari/537.36'}
response = requests.get('https://www.apollo.ee/raamatud/eestikeelsed-raamatud/ilukirjandus/ulme-ja-oudus?page=7&mode=list',headers=headers)
webpage = response.content
soup = BeautifulSoup(webpage,'html.parser')
for parent in soup.find_all('div',class_='product-info'):
for n,tag in enumerate(parent.find_all('div')):
title = [x for x in tag.find_all('a',class_='block no-underline product-link')]
author = [x for x in tag.find_all('span',class_='info__text block weight-700 mt8 mb16')]
for item in title:
print('TITLE:',item.text.strip())
for item in author:
author = item.text.split('\n')
print('AUTHOR: ',item.text.strip())
`
示例結果：
標題： Parv II
作者：Frank Sch?tzing
作者：9789985317105
作者：瓦拉克
作者：K?vakaaneline
作者：2010
作者：Frank Sch?tzing
作者：9789985317105
作者：瓦拉克
作者：K?vakaaneline
作者：2010
作者：Frank Sch?tzing
作者：9789985317105
作者：瓦拉克
如您所見，作者的資料重復，我得到了不需要的資料（出版商、年份、代碼等）。現在我知道所有這些不同的資料都具有相同的類。我的問題是：有沒有辦法只為作者獲取資料？或者怎么清洗？
謝謝
uj5u.com熱心網友回復：
您可以使用 CSS 選擇器正確選擇標題/作者：
import requests
from bs4 import BeautifulSoup
url = "https://www.apollo.ee/raamatud/eestikeelsed-raamatud/ilukirjandus/ulme-ja-oudus?page=7&mode=list"
soup = BeautifulSoup(requests.get(url).content, "html.parser")
for book in soup.select(".product"):
title = book.select_one(".product-title").text.strip()
author = book.select_one(
".info__title:-soup-contains(Autor) span"
).text.strip()
print("{:<50} {}".format(title, author))
印刷：
Eric Terry Pratchett
L?putuse piirid Lois McMaster Bujold
M??kade maru. II raamat George R. R. Martin
Euromant Maniakkide T?nav
Joosta oma varju eest. T?heaeg 9 Triinu Meres, Kadri Pettai, Maniakkide t?nav, Tea Roosvald, ülle L?tte, Jeff Vandermeer
Ilus pimedus Kami Garcia, Margaret Stohl
Bal-Sagothi jumalad Robert E. Howard
Tüdruk veiniplekiga kleidis Eda Kalmre
Talvesepp Terry Pratchett
V?luv v?rdsus Terry Pratchett
Nekromanteion Arvi Nikkarev
Vere magus l?hn Suzanne McLeod
Tantsud armastuse l?ppu Liis Koger
K?rbeoda Peter V. Brett
Palimpsest Charles Stross
Tigana Guy Gavriel Kay
Kardinali m??gad Pierre Pevel
Ajaratsurid: K?ttemaksja. P.C.Cast
Hullumeelsuse m?gedes H. P. Lovecraft
Vori m?ng Lois McMaster Bujold
Ajalooja Milvi Martina Piir
Punane Sonja Robert E. Howard
S?da kosmose rannavetes Raul Sulbi
Katastroof Krystyna Kuhn
Robotid ja impeerium Isaac Asimov
Ajaratsurid: Tapja Cindy Dees
Hundip?ikese aeg III Tamur Kusnets
Gort Ashryn III osa. Rahu Leo Kunnas
Surnud, kuni j?uab ?? Charlaine Harris
Lase sisse see ?ige John Ajvide Lindqvist
M?ng Krystyna Kuhn
J?rgmiseks Crichton, Michael
K?igi hingede ?? Jennifer Armintrout
Kaose m?rk Roger Zelazny
Allak?ik Guillermo del Toro, Chuck Hogan
Külmav?etud Richelle Mead
N?htamatud akadeemikud Terry Pratchett
Varjus hiilija Aleksei Pehhov
Ajaratsurid: Otsija Lindsay McKenna
Maalingutega mees Peter V. Brett
Viimane s?rmusekandja Kirill Jeskov
Falkenbergi leegion Jerry Pournelle
S?duri ?pilane Lois McMaster Bujold
Vampiiri k?ttemaks Alexis Morgan
Kurjuse küüsis Jennifer Armintrout
Tiiger! Tiiger! Alfred Bester
Tume torn Stephen King
Koidu robotid Isaac Asimov
N?id Michael Scott
P?evane vahtkond Sergei Lukjanenko
Perpendikulaarne maailm Kir Bul?chov
ümbersünd Jennifer Armintrout
Kadunud oaas Paul Sussman
T?heaeg 7. Ingel ja kvantkristall Raul Sulbi
Leek sügaviku kohal Vernor Vinge
Sümfoonia katkenud keelele Siim Veskimees
Parv II Frank Sch?tzing
Kuldne linn John Twelve Hawks
H?bekeel Charlie Fletcher
Rahategu Terry Pratchett
Amberi veri Roger Zelazny
Kuninga tagasitulek J.R.R. Tolkien
T?bi Guillermo del Toro, Chuck Hogan
V??rana v??ral maal Robert A. Heinlein
Elu, universum ja k?ik Douglas Adams
Frenchi ja Koulu reisid Indrek Hargla
13. s?dalane. Laiba?gijad Michael Crichton
Accelerando Charles Stross
Universumi l?pu restoran Douglas Adams
Surmakarva Maniakkide T?nav
Kauge maa laulud Arthur C. Clarke
P?idlaküüdi reisijuht galaktikas Douglas Adams
Alasti p?ike Isaac Asimov
Barrayar Loius McMaster Bujold
Fevre′i unelm George R.R. Martin
Hukatuse kaardid Roger Zelazny
Loomine Bernard Beckett
Pika talve algus. T?heaeg 6 Raul Sulbi
Troonide m?ng. II raamat George R. R. Martin
Malakas Terry Pratchett
Kuninglik salam?rtsukas Robin Hobb
Algolagnia Marion Andra
Tormikuninganna Marion Zimmer Bradley
Munk maailma ??rel Skarabeus
Alaizabel Cray painaja Chris Wooding
Anubise v?ravad Tim Powers
Lisey lugu Stephen King
Postiteenistus Terry Pratchett
Linnusild Barry Hughart
Raudk?si Charlie Fletcher
Südame metsad Charles de Lint
Meie, kromanjoonlased Tiit Tarlap
Calla hundid Stephen King
Ruunim?rgid Joanne Harris
Tuule nimi. Kuningatapja kroonika I osa 2. raamat Patrick Rothfuss
Windhaven George R. R. Martin, Lisa Tuttle
Taevane tuli Anne Robillard
Vampiiri k?ealune Darren Shan
Teem?rgid Roger Zelazny
Kinnimüüritud tuba Ilo
轉載請註明出處，本文鏈接：https://www.uj5u.com/houduan/530072.html