C#+HtmlAgilityPack+XPath帶你采集數據(以采集天氣數據為例子)
第一次接觸HtmlAgilityPack是在5年前,一些意外,讓我從技術部門臨時調到銷售部門,負責建立一些流程和尋找潛在客戶,最后在阿里巴巴找到了很多客戶信息,非常全面,剛開始是手動復制到Excel,是真尼瑪的累,雖然那個時候C#還很菜,也想能不能通過程序來批量獲取(所以平時想法要多才 ...
第一次接觸HtmlAgilityPack是在5年前,一些意外,讓我從技術部門臨時調到銷售部門,負責建立一些流程和尋找潛在客戶,最后在阿里巴巴找到了很多客戶信息,非常全面,剛開始是手動復制到Excel,是真尼瑪的累,雖然那個時候C#還很菜,也想能不能通過程序來批量獲取(所以平時想法要多才 ...
經常采集數據,肯定會碰到解析字符串,包括整個頁面的html,或者json以及一些不標准的json格式。。。 以前用json序列化,有時候需要實體類,有的時候沒有,比較麻煩,聽說可以用 ...
由於個人研究需要,需要采集天氣歷史數據,前一篇文章:C#+HtmlAgilityPack+XPath帶你采集數據(以采集天氣數據為例子),介紹了基本的采集思路和核心代碼,經過1個星期的采集,歷史數據庫基本全了,現在開放該數據庫,目的是為了讓可能需要該類型做相關研究准備的,至於實時天氣 ...