下面是我的編碼,以提取標題和公司:
driver.find_element_by_xpath("//*[@id='speakers']/div/div/div/div"/span>).text.split('
')
誰能幫我提取每個人的簡介?任何建議都值得贊賞!
uj5u.com熱心網友回復:
你不必點擊圖片,因為每個發言人的所有模版都在原始碼中完全填充。你可以通過使用driver.execute_script從這些模態中提取內容:
from selenium import webdriver
d = webdriver.Chrome('/path/to/chromedriver')
d.get('https://blueprint.connectiv.com/speakers/')
結果 = d.execute_script("""
var people = [];
for (var i of document.querySelectorAll('.modal. speakerCard')){
people.push({
name:i.querySelector('.description h4').textContent,
title:i.querySelector('p.title').textContent,
company:i.querySelector('p.company').textContent,
bio:i.querySelector('p.bio').textContent。
});
}
return people;
"")
輸出(前20個結果):
[{'bi': 'Andrew是一個恢復期的顧問,轉為連續創業者、創業導師和天使投資人。他是Dreamit Urbantech的總經理,投資于Proptech和建筑技術。安德魯曾為《財富》、《福布斯》、Propmodo、CREtech、Builders Online、Architect Magazine、Multifamily Executive、AlleyWatch、Edsurge、The 74 Million等撰文。安德魯創立了兩家公司,并對建立一個成功的初創企業是多么困難有深刻的體會,即使在最好的情況下。', '公司': 'Dreamit Ventures', 'name': 'Andrew Ackerman', 'title': 'Venture Partner'}, {'bi': 'Salman Ahmad是Mosaic的首席執行官和聯合創始人,Mosaic是一家建筑技術公司,專注于使住宅建設可擴展。通過對程序(住宅建設)而不是產品(住宅)進行標準化,Mosaic正在提供人們喜愛的地方,并創造更好的社區。薩爾曼擁有麻省理工學院電子工程和計算機科學博士學位,專注于面向服務的系統的編程語言設計,斯坦福大學計算機科學碩士學位,專注于人機互動,以及亞利桑那州立大學計算機系統工程學士學位u2028,他還在軟體系統、編程語言、機器學習、人機互動和傳感器硬體等領域發表了20篇技術文章和專利。帶著對建筑、軟體和計算機科學的熱情,薩爾曼共同創立了Mosaic公司,以建造人們喜愛的地方并使其廣泛使用。','公司'。'Mosaic'/span>, 'name'/span>: 'Salman Ahmad', 'title': '首席執行官和聯合創始人'}, {'生物': 'Dafna Akiva在房地產投資、開發、管理和建筑行業擁有10年以上的經驗。在擔任Veev的首席收入官之前,Dafna作為首席運營官監督日常運營,并推動了一些公司的擴展計劃。現在,作為首席收入官,Dafna領導Veev新專案的開發,重新定義客戶的生活體驗,并為公司的底線推動收入增長。她負責監督所有的房地產收購和運營策略、房地產開發和客戶管理,以及銷售、營銷、法律和人力資源。, 'company': 'Veev', 'name': 'Dafna Akiva'/span>, 'title'/span>: 'CRO & Co-Founder'}, {'bi': 'Min Alexander擔任PunchListUSA的首席執行官,該房地產平臺將房屋檢查數字化,以便在線訂購維修和生命周期服務。在過去的十年中,Min一直在推動數字顛覆,以實作房地產的民主化。她曾領導過兩個全國性的B2B2C平臺,現場操作,并創建了一個美國前十名的經紀公司,改變了這個行業,以提高訪問、質量和透明度。
在加入PunchListUSA之前,Min曾擔任Auction.com的首席運營官、REALHome Services and Solutions的首席執行官和總裁以及Altisource的房地產服務高級副總裁。Min擁有杜克大學的學士學位和麻省理工學院的MBA。', '公司': 'PunchlistUSA'/span>, 'name'/span>: 'Min Alexander', 'title': 'CEO & Co-Founder'}, {'bi': 'Nora Apsel是在線抵押貸款市場Morty的聯合創始人和CEO。Morty為購房者提供了一個評估來自多個貸款機構的競爭性報價的地方,然后通過一個自動平臺鎖定并完成他們的貸款。Morty由工程師創立和領導,利用技術開辟了一條新的抵押貸款之路:完全數字化,沒有傳統的基礎設施,并得到傳統貸款人靈活、可擴展的資本基礎的支持。作為首席執行官,諾拉正帶領莫蒂團隊實作快速的、以產品為導向的增長和全國范圍的擴張。Morty是一家由風險投資支持的公司,投資者包括Thrive Capital、Lerer Hippeau、MetaProp、March Capital、Prudence Holdings、FJ Labs和Rethink Impact。在成為運營商之前,諾拉接受過軟體工程師的培訓,擁有賓夕法尼亞大學的計算機科學碩士學位和埃默里大學的學士學位。', '公司'。'Morty', 'name': 'Nora Apsel'/span>, 'title'/span>: 'CEO & Co-Founder'}, {'bi': 'Carey Armstrong是Tomo的聯合創始人和首席收入官,Tomo是一家金融科技創業公司,將提供最以客戶為中心的購房方式。Tomo成立于2020年秋季,籌集了由Ribbit Capital、NFX和Zigg Capital牽頭的4000萬美元的初始種子輪。
凱里的作業重點是為Tomo客戶定義和提供愉快的購房體驗。她領導我們的核心交易產品的開發,以及支持該產品的業務部門的增長和發展,包括抵押貸款和經紀業務。
在共同創立Tomo之前,凱里是Zillow集團的首席代理副總裁,在那里她領導10億美元買方服務業務的業務戰略、產品戰略和核心運營。在這個職位上,她負責推動包括 "連接"、"家庭旅游 "和 "靈活選擇團隊 "在內的各項舉措的重大飛躍。
在加入Zillow之前,Carey曾分別在波士頓咨詢集團和Forrester Research擔任戰略顧問和行業分析師。凱里擁有哈佛大學的學士學位和達特茅斯大學塔克商學院的MBA學位。她和她的家人居住在西雅圖。', '公司'。'Tomo'/span>, 'name'/span>: 'Carey Armstrong', 'title': 'CRO & Co-Founder'}, {'bi': 'Arie是WiredScore的創始人和首席執行官,他是國際WiredScore認證系統背后的先驅者,該系統評估和區分商業建筑中的最佳互聯網連接。在創立WiredScore之前,Arie在紐約市的波士頓咨詢集團擔任顧問,主要負責技術和媒體行業。Arie擁有沃頓商學院的MBA學位,以及加州大學伯克利分校的商業和政治學學士和學士學位。', 'company': 'WiredScore'/span>, 'name'/span>: 'Arie Barendrecht', 'title': 'CEO & Founder'}, {'bi': 'Demetrios Barnes是SmartRent的首席運營官,他領導客戶參與、供應鏈和現場運營團隊。他擁有超過十年的物業管理運營經驗,熱衷于幫助業主和運營商了解技術能夠產生的創新,同時建立強大的人際關系并參與思想領袖討論。在共同創立SmartRent之前,他是Colony Starwood Homes的技術副總裁,在此之前,Barnes先生是Beazer Pre-Owned Rental Homes的物業管理和技術總監,以及幾家多戶公司的區域經理。巴恩斯先生擁有亞利桑那州立大學的工商管理學士學位。', 'company': 'SmartRent'/span>, 'name'/span>: 'Demetrios Barnes', 'title': 'COO & Co-Founder'}, {'bi': "Ryan J. S. Baxter是紐約州能源研究和發展局(NYSERDA)的PropTech顧問,PropTech挑戰賽的聯合創始人,MetaProp NYC的紐約市社區增長負責人,以及PASSNYC的創始人。在此之前,瑞安曾擔任紐約房地產委員會(REBNY)的副總裁。他是一個土生土長的紐約人,熱衷于使本市的建筑環境更具教育意義。
",'公司'。'Proptech Challenge', 'name': 'Ryan Baxter', 'title': '聯合創始人'}, {'生物': 'Gary是Roofstock的首席執行官,這是一個領先的房地產投資市場,他在2015年共同創立。加里的大部分職業生涯都是在房地產、酒店業和科技領域建立業務。在獲得西北大學的經濟學學士學位后,加里冒險去西部獲得了斯坦福大學的MBA學位,在那里他抓住了創業的機會,現在仍然經常擔任客座講師。在此之前,加里在為KSL度假村收購和整合超過8億美元的度假物業方面發揮了重要作用,并在在線經紀先驅ZipRealty公司擔任了五年的首席財務官,他帶領該公司在2004年成功上市。加里還擔任過Joie de Vivre Hospitality公司的首席執行官,該公司當時是美國第二大精品酒店管理公司。在創辦Roofstock之前,Gary作為Starwood Waypoint Residential Trust(現在是Invitation Homes的一部分)的聯合首席執行官,帶領美國最大的單戶住宅租賃平臺之一完成了IPO。'Roofstock'/span>, 'name'/span>: 'Gary Beasley', 'title': 'CEO & Co-Founder' }, {'bio': "Robyn在采用復雜的氣候和清潔能源相關的技術概念,并將其轉化為以商業為導向的戰略,從而帶來影響、規模和結果方面有著良好的記錄。她的職業生涯始于2004年,當時她在加州山景城的谷歌公司作業,直接向聯合創始人報告,在他們將公司上市時負責戰略計劃。之后,羅賓創建了谷歌的第一個業務部門,專注于將清潔能源發電納入公司的全球運營。在這個職位上,她監督并推動了谷歌的第一個清潔能源計劃,包括為資料中心大規模采購清潔能源,以及在山景城總部開發和安裝1.7兆瓦的屋頂太陽能裝置。此后,她為哥本哈根的維斯塔斯風電公司、DEKA R&D的迪安-卡門和NRG能源公司建立、投資并為新的企業和專案籌集了5000萬美元以上的資金。最近,她是Lennar公司的高管,在那里她建立了公司的第一個企業風險平臺,同時孵化了藍圖電力技術。今天,羅賓-比弗斯是Blueprint Power的首席執行官和聯合創始人,Blueprint Power是一家位于紐約市的房地產技術公司,將建筑物變成創收的清潔發電廠。羅賓被評為2020年安永的紐約年度企業家。羅賓擁有斯坦福大學的土木工程學士學位和MBA學位。", 'company': 'Blueprint Power'/span>, 'name'/span>: 'Robyn Beavers', 'title': 'CEO & Co-Founder'}, {'生物': 'Liza Benson是Moderne Ventures的合伙人,幫助領導和管理投資活動,特別關注那些能夠實作快速應用和規模的高增長技術公司。Moderne Ventures是一個早期投資基金和行業沉浸計劃,專注于投資房地產、抵押貸款、金融、保險和家庭服務等幾萬億美元行業內及周邊的技術公司。
在加入Moderne之前,Liza是StarVest Partners的合伙人,這是一個4億美元的風險基金,專注于擴張階段的B2B SaaS投資。在此之前,Liza是高橋原則戰略公司(Highbridge Principals Strategies)成長型股權組的常務董事,該公司是一家價值數十億美元的資產管理公司。在加入Highbridge之前,Liza是貝爾斯登的Constellation Growth Capital的董事總經理,也是Patricof & Co和First Union的投資銀行家,她在那里開始了她的職業生涯。', '公司': 'Moderne Ventures'/span>, 'name'/span>: 'Liza Benson', 'title': 'Partner'}, {'bio': 'Jeremy Bernard是essensys的北美首席執行官,essensys是全球領先的靈活房地產行業的軟體和技術供應商。他在房地產和技術領域擁有超過25年的經驗。最近,Jeremy是Knotel的全球房地產主管,他在那里發展并監督世界各地550萬平方英尺的靈活辦公空間組合。在之前的作業中,他曾在房地產投資公司擔任C級職位,并創辦了幾家道具技術公司。Jeremy與他的妻子Jamie、女兒Morgan和兒子Brody居住在康涅狄格州的Westport。'essensys', 'name': 'Jeremy Bernard', 'title': 'CEO, North America'}, {'生物': "Benjamin Birnbaum是Keyframe的合伙人--一家位于紐約的投資公司。 他的作業重點主要是研究技術如何在一些物理基礎設施類別中引起市場變化,如交通和能源,這是受早期作為世界上最大的客運公司之一的運營領導者的職業經歷的啟發。 本也是TeraWatt基礎設施公司的聯合創始人,該公司是一家專注于車隊電氣化的電動汽車充電基礎設施的專業業主。",'公司'。'Keyframe Capital'/span>, 'name'/span>: 'Ben Birnbaum', 'title': 'Partner'}, {'bio': 'Sean是BLACK的聯合創始人& CEO,BLACK是一個基于技術和云的CRE經紀平臺,位于紐約市。在創立BLACK之前,肖恩曾在WeWork擔任房地產和企業銷售執行副總裁,在他20年的任期內,他參與了數百萬平方英尺的商業房地產租賃交易,并曾在世界最大的商業經紀公司作業,包括Cushman & Wakefield、JLL、Newmark和Grubb & Ellis。 ', '公司'。'BlackRE', 'name': 'Sean Black', 'title': 'CEO & Co-Founder'}, {'bi': '作為CA Student Living的首席運營官,Steve Boyack負責推動CASL物業管理平臺的業績和增長,并監督其企業運營職能,包括技術、人力資源、溝通和文化。史蒂夫利用他在該行業幾十年的經驗,發展和推進構成業務基礎的人員、流程和技術。
博亞克曾擔任CA Ventures(CA Student Living的母公司)的全球物業管理負責人,他為公司的歐洲學生運營平臺(Novel Student)、全球可持續發展倡議、健康計劃和創新部門奠定了基礎。在加入CA之前,史蒂夫是Greystar公司的高級董事總經理,他負責監督房地產運營,并領導公司在中西部主要市場的擴張。此外,他還負責監督Greystar公司的全國建筑和維護業務,并與他們的全球創新團隊合作。
史蒂夫在愛荷華大學獲得經濟學學士學位,并獲得了房地產管理協會的CPM?認證。作為幾個行業咨詢委員會和協會的成員,Steve是公認的主題專家和思想領袖,特別關注綜合物業技術。'CA Ventures'/span>, 'name'/span>: 'Steve Boyack', 'title': 'COO, Student Living'}, {'生物': 'Laura Cain是Willow Servicing的首席執行官和聯合創始人,該公司是一家專注于簡化抵押貸款服務的技術公司。Willow的平臺將核心作業流程自動化,使貸款人能夠提供數字優先的借款人體驗,同時降低運營成本并確保符合行業政策和法規。在加入Willow之前,Laura是Snapdocs的產品經理,在那里她為貸款人提供了最初的eClose產品;她還是Thomvest的風險投資者,在那里她專注于早期的金融技術投資。'Willow Servicing', 'name': 'Laura Cain', 'title': 'CEO & Co-Founder'}, {'bi': 'Madhu Chamarty是BeyondHQ的聯合創始人和首席執行官,該公司是一家幫助公司規劃和擴展分布式團隊的創業公司。作為一名工程師和數學愛好者,他在硅谷有15年以上的創業經驗,曾在數字媒體(Adify - Cox acq. @ $300MM)、員工社區(Dynamic Signal)和地理空間分析(Descartes Labs)等三個高增長的B2B創業公司擔任早期員工和聯合創始人。他曾在全球范圍內擴大銷售和支持團隊的規模,包括集中和遠程形式。他在一個完全分布在4個國家的家庭中長大,所以他相信在他知道之前就已經注定要建立BeyondHQ。'BeyondHQ', 'name': 'Madhu Chamarty', 'title': 'CEO & Co-Founder'}, {'bi': 'Alex Chatzielftheriou是一位希臘企業家,也是Blueground--一家成立于2013年的房地產科技公司的CEO和聯合創始人。Blueground在全球14個城市提供一個設施齊全、可隨時入住的公寓網路,供人們居住一個月、一年或更長時間。在全球超過15個城市生活和作業過后,亞歷克斯試圖為商務和休閑旅行者提供一種無憂無慮的方式來尋找有家的感覺的地方--從第一天開始出現并開始生活。一路走來,亞歷克斯顛覆了傳統的租賃模式,使靈活的生活方式鼓勵旅行和探索世界及其文化,同時提供一個讓人感到 "踏實 "并稱之為家的地方。', '公司': 'Blueground'/span>, 'name'/span>: 'Alex Chatzieleftheriou', 'title': 'CEO & Co-Founder'}, {'bi': 'Jit Kee Chin是薩福克的首席資料& 創新官和執行副總裁。Chin女士負責利用大資料和先進的分析技術來改善組織的核心業務。秦女士還負責幫助薩福克實作其轉變建筑體驗的愿景,同時與公司的創新和戰略團隊密切合作,從根本上重塑數字時代的建筑業的未來。
在加入薩福克之前,秦女士在管理咨詢公司麥肯錫作業了10年,為高級管理人員提供戰略、商業和先進分析方面的咨詢。最近,她是麥肯錫波士頓辦事處的高級分析專家,專門負責設計和實施端到端的分析轉型。在此之前,秦女士是麥肯錫倫敦辦事處的副主管,她幫助企業推動多年的業務轉型和變革計劃,并制定盈利增長的戰略。'薩福克建筑', 'name': 'Jit Kee Chin', 'title': 'Chief Data & Innovation Officer'}] 。
在pandas:
import pandas as pd
df = pd.DataFrame(results)
print(df)
輸出:
bio company name title
0 安德魯是一個正在恢復的顧問,轉而成為一個專家。 Dreamit Ventures Andrew Ackerman 風險投資合伙人
1 Salman Ahmad 是Mosaic的首席執行官和聯合創始人。 Mosaic Salman Ahmad首席執行官和聯合創始人
2 Dafna Akiva 是一位10年以上的資深人士在真正的... Veev Dafna Akiva CRO & 聯合創始人
3 Min Alexander擔任PunchListUSA的首席執行官。 PunchlistUSA Min Alexander CEO & Co-Founder
4 Nora Apsel 是Morty的聯合創始人和CEO。 Morty Nora Apsel CEO & Co-Founder
.. ... ... ... ...
128 黃女士于2015年加入Tishman Speyer。 Jenny ... Tishman Speyer Jenny Wong 總經理
129 Joseph 是Neighbor.com的創始人和CEO,... 鄰居Joseph Woodbury首席執行官& 創始人
130 總部設在Palo Alto,Michael Yang 是管理合伙人。 OMERS風險投資公司的管理合伙人Michael Yang
131 自從加入RET風險投資公司作為合伙人在2019,... RET Ventures Christopher Yip 合伙人及常務董事
132 Chris Zlocki, Global Head of Client Experience... 高力國際 Chris Zlocki 職業經理人服務部執行副總裁
[133 行 x 4 列]
代替driver.execute_script,你可以使用BeautifulSoup:
from bs4 import BeautifulSoup as soup
from selenium import webdriver
d = webdriver.Chrome('/path/to/chromedriver')
d.get('https://blueprint.connectiv.com/speakers/')
s = soup(d.page_source, 'html.parser').select('.modal. speakerCard')
r = [dict(zip(['name', 'title', 'company', 'bi'],
[b.text for b in i.select(':is(h4, p.title, p.company, p.bio)') ]) for i in s] 。
uj5u.com熱心網友回復:
如果你要找的所有資訊都在一個段落標簽<p>內,該標簽的類是bio(所以<p class='bio'>),并且所有的模態都已經存在于源代碼中,那么你可以簡單地用:
bios = driver.find_elements_by_xpath('//p[@class="bio"]'/span>)
這將選擇所有屬于<p>標簽的元素,并且其類別也等于'bio',并在一個串列中回傳。如果一些p標簽中有其他的類(即<p class='bio someotherclass'>),那么你將需要在你的xpath中使用contains()方法,像這樣:
bios = driver.find_elements_by_xpath('//p[contains(@class, "bio") ]')
然后你可以像這樣回圈查看結果:
for bio in bios:
print(bio.text)
轉載請註明出處,本文鏈接:https://www.uj5u.com/net/320260.html
標籤:

