首先参考http://blog.csdn.net/sa14023053/article/details/51713301， 但是我在调试的时候遇到很多坑，记录下来供参考。 环境如下 计算机：wi ...

目标说明 利用scrapy抓取中新网新闻，关于自然灾害滑坡的全部国内新闻；要求主题为滑坡类新闻，包含灾害造成的经济损失等相关内容，并结合textrank算法，得到每篇新闻的关键词，便于后续文本挖掘分析。 网站分析 目标网站：http://sou.chinanews.com ...