Java廣度優先爬蟲示例(抓取復旦新聞信息)

以下內容僅供學習交流使用，請勿做他用，否則后果自負。 一.使用的技術 這個爬蟲是近半個月前學習爬蟲技術的一個小例子,比較簡單,怕時間久了會忘,這里簡單總結一下.主要用到的外部Jar包有Htt ...

基於HtmlParser的網絡爬蟲

一、 目標 獲取網頁中的超鏈接及鏈接名，如從http://www.hao123.com/開始，抓取所有hao123鏈接到的超鏈接，再以獲取到的鏈接網頁為目標，獲取它所鏈接到的網頁。 ...