使用Heritrix爬虫爬取网页

在配置好heritrix后，可以输入形如：http://localhost：8080的服务器IE地址，进入UI界面登陆。则可开始建立网页爬行抓取任务。 1.首先启动Heritrix后台监听程序，然后 ...