想寫個網頁采集器、請問C# 自已寫的winForm,如何獲得瀏覽器(如360）網頁中選取的部分內容（文本和圖片）？
uj5u.com熱心網友回復：
我目前想到有兩種方法,第一種用 Clipboard.GetDataObject()，但這種方法，不能圖文一并獲取，而且無法獲得鏈接內容（即原始碼、htmlText）。
第二種用 EnumWindows--mshtml.IHTMLDocument2，但這種方法只能獲取兼容模式內容，即InternetExplorer，無法獲取極速模式的Chrorme內容？
煩請各位大神能指點一下迷津，指條明路。謝謝！
uj5u.com熱心網友回復：
HttpWebRequest滿足不了你么？uj5u.com熱心網友回復：
"選取的部分"是啥意思uj5u.com熱心網友回復：
我的意思是，在自已寫的winForm里,去獲取 ，比如：360瀏覽器或者qq瀏覽器等打開的網頁里，選擇一段想要的內容（文本或圖片）。uj5u.com熱心網友回復：
uj5u.com熱心網友回復：
就像這樣獲取其中一段文字含圖片。uj5u.com熱心網友回復：
第一種 知道地址用 HttpClient 或 HttpWebRequest 爬一下第二種，用 webbrowser 組件通過 Dom 來處理，這個更方便一些。
uj5u.com熱心網友回復：
用HttpWebRequest，還要自已寫瀏覽器，太麻煩了。用 webbrowser 組件通過 Dom 來處理，我試過，好像得不到360瀏覽器或者qq瀏覽器頁面內容（在極速模式下）
uj5u.com熱心網友回復：
HttpWebRequest怎么需要自己寫瀏覽器呢, 不是發送請求然后獲取回應的內容么, 正是你要的啊, 比如下載圖片:https://blog.csdn.net/KingCruel/article/details/53538148uj5u.com熱心網友回復：
或者你安裝一個curl, 然后c#里面呼叫更簡單:https://zhidao.baidu.com/question/552246331.html
uj5u.com熱心網友回復：
老大，我是想寫一個網頁采集小程式，目的就是在上網程序中，看到好的文章，代碼等 ，就摘要保存下來，供以后學習。也就是說網址并不確定，而是看到有什么好文，再收集，所以用HttpWebRequest 這個不是太合適啊。也就是要便看便采集。所以只能用瀏覽器先閱讀，再采集。以前一直用的是網博士，但作者很久不更新了，而且在64位也，使用有點問題，所以才逼著自已動手想寫一個類似的采集程式。uj5u.com熱心網友回復：
你的這個需求看似簡單，實則很麻煩的。如果能指定一種瀏覽器，可以定制開發，否則那么多種類的瀏覽器，其內部實作的原理都不一樣，要都實作難度比較大。uj5u.com熱心網友回復：
咱們暫且指定一種360瀏覽器，如何抓取呢？用spy++查看了一下360瀏覽器。極速模式
視窗句柄:985154
視窗標題:Chrome Legacy Window
類名:Chrome_RenderWidgetHostHWND
兼容模式：
視窗句柄:1507940
視窗標題:
類名:Internet Explorer_Server
uj5u.com熱心網友回復：
兼容模式，用的是IE ,目前我可以收集到，但極速模式，還不知道怎么獲取？uj5u.com熱心網友回復：
用CEF自己搭一個瀏覽器，和360急速模式用的內核一樣uj5u.com熱心網友回復：
不會真的沒有辦法獲得360瀏覽器網頁的內容吧？好郁悶！！！uj5u.com熱心網友回復：
這個C#，與C,C++區別大嗎？uj5u.com熱心網友回復：
進入學習狀態。。。。。。。。。uj5u.com熱心網友回復：
看7樓，宣告一個HttpClient 或 HttpWebRequest（網址路徑寫好），找一個一個get方法存到list或Table中，然后你就可以用了。uj5u.com熱心網友回復：
好好學習c++ 編程使用uj5u.com熱心網友回復：
抓取資料用httprequestuj5u.com熱心網友回復：
其實最簡單的辦法就是 滑鼠右鍵 ->復制啊！！ 然后在自己的程式里 粘貼
//---------以下的代碼是我網上復制的 它直接下載整個頁面的代碼，管用！
//--------- 呼叫 方式為 string htm= HttpGetPageHtml("https://www.ip.cn", "utf-8");
/// <summary>
/// 獲取頁面html
/// </summary>
/// <param name="url">請求的地址</param>
/// <param name="encoding">編碼方式</param>
/// <returns></returns>
public static string HttpGetPageHtml(string url, string encoding)
{
string pageHtml = string.Empty;
try
{
using (WebClient MyWebClient = new WebClient())
{
Encoding encode = Encoding.GetEncoding(encoding);
// 確定自己瀏覽器的User-Agent資訊
// 首先打開你的瀏覽器輸入：about:version
MyWebClient.Headers.Add("User-Agent", "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/57.0.2987.98 Safari/537.36 LBBROWSER");
MyWebClient.Credentials = CredentialCache.DefaultCredentials;//獲取或設定用于向Internet資源的請求進行身份驗證的網路憑據
Byte[] pageData = MyWebClient.DownloadData(url); //從指定網站下載資料
pageHtml = encode.GetString(pageData);
}
}
catch (Exception e)
{
return e.Message.ToString();
}
return pageHtml;
}
uj5u.com熱心網友回復：
抓取資料用httprequestuj5u.com熱心網友回復：
什么意思選取內容是什么uj5u.com熱心網友回復：
這是參考，只要改下 相關代碼即可。using System;
namespace ConsoleApp2
{
class Program
{
static void Main(string[] args)
{
System.Net.Http.HttpClient httpClient = new System.Net.Http.HttpClient();
httpClient.BaseAddress = new Uri("https://dms.esnadexpress.com/");
System.Net.Http.HttpRequestMessage httpRequestMessage = new System.Net.Http.HttpRequestMessage();
httpRequestMessage.Method = new System.Net.Http.HttpMethod("GET");
httpRequestMessage.Headers.Add("context-type", "application/pdf");
httpRequestMessage.RequestUri = new Uri("https://dms.esnadexpress.com/img/2019-07-16/2/custom_pdf_ESNAD_1563242468479_54981_3223fe36-31c3-4d73-b447-d2c4720046fa.pdf");
System.Net.Http.HttpResponseMessage httpResponseMessage = httpClient.SendAsync(httpRequestMessage).Result;
if (httpResponseMessage.StatusCode == System.Net.HttpStatusCode.OK)
{
System.IO.Stream stream = httpResponseMessage.Content.ReadAsStreamAsync().Result;
using (System.IO.FileStream fs = new System.IO.FileStream("e:\\download.pdf", System.IO.FileMode.CreateNew))
{
byte[] buffer = new byte[stream.Length];
stream.Read(buffer, 0, buffer.Length);
fs.Write(buffer, 0, buffer.Length);
}
}
}
}
}
uj5u.com熱心網友回復：
如果你是要搞采集的話，送你一個強大的html分析工具：HtmlAgilityPack。uj5u.com熱心網友回復：
你還不如去用網路收藏夾，比如http://yijee.esgao.cn/，注冊個賬號就可以了。或者使用油猴插件，寫JS代碼，將選區發送到指定的地址，再寫入資料庫或者檔案里
uj5u.com熱心網友回復：
首先，感謝各位大神的回復。我先解釋下，為什么不用httprequest 或 WebClient：
第一，我不知道我要的資料在哪，只有通過瀏覽器搜尋找到想要的內容。
第二，想要的內容不一定是全文，可能只是其中的部分內容。也就是說要在網頁中檢索出我要的內容。
第三，如果再呼叫httprequest 或 WebClient把網頁或圖片下載下來，再分析提出，等于要檢索2次。還要在winForm和瀏覽器中切換。效率太低，達不到自動化的效果。
其次，我想說一下 我的主要問題是：
如何獲得瀏覽器(如360瀏覽器）里網頁中選取的部分內容（文本和圖片）？
uj5u.com熱心網友回復：
沒太懂樓主想實作什么功能，你是要自己開發一個winform程式瀏覽網頁，然后在瀏覽的程序中把你覺得好的東西保存一下，還是用瀏覽器瀏覽網頁，然后把比較好的東西保存一下。uj5u.com熱心網友回復：
既然你都選取內容了 你就按一下 Ctrl+V 然后 winform里 操作剪切板就好了啊~
uj5u.com熱心網友回復：
上面手誤了 應該是 Ctrl+C 復制， 然后 winform 里 獲取剪切板 內容uj5u.com熱心網友回復：
用 Clipboard.GetDataObject()，但這種方法，不能圖文一并獲取，而且無法獲得鏈接內容（即原始碼、htmlText）。uj5u.com熱心網友回復：
有一個插件程式叫cefsharp的你可以百度下看看。可以讓你開啟瀏覽器神模式。沒有資訊是拿不到的。uj5u.com熱心網友回復：
看了上面的回答，好像都沒有理解樓主的意思。樓主其實可以做成像QQ截圖一下，設定組合鍵，呼叫自己的程式去截圖，截完后你可以對圖片進行文字提取保存文本，或是直接保存圖片到你自己的系統里面。
uj5u.com熱心網友回復：
這個建議不錯，可是后期如果能完整地從圖中把文字識別出來，那就可以爭大錢啦！uj5u.com熱心網友回復：
我的一個C#專案，也涉及到和樓主一樣的問題，研究了好幾天了，一個基本的思路是獲得瀏覽器視窗的句柄，然后發送CTRL+C，把內容復制到系統的剪貼板中，再提取剪貼板內容，但目前看問題還比較多。不知道樓主解決了沒有，如果解決了可否分享下。謝謝！uj5u.com熱心網友回復：
每天逛逛CSDN學習uj5u.com熱心網友回復：
樓主可以把這個改造一下
uj5u.com熱心網友回復：
自己寫個瀏覽器插件，用插件去獲取復制內容轉載請註明出處，本文鏈接：https://www.uj5u.com/net/120296.html
標籤：C#
上一篇：表單之間的傳值