这次记录的scrapy-splash的安装和使用基本上是两种情况：一是win10比较新的版本+docker for windows；二是win10家庭版，win7（理论上win8也是）+docker toolbox 首先是win10比较新的版本+docker for windows： 前面 ...

chrome_options = webdriver.ChromeOptions() chrome_options.add_argument('--headless') # 无 ...

scrapy-splash的介绍   在前面的博客中，我们已经见识到了Scrapy的强大之处。但是，Scrapy也有其不足之处，即Scrapy没有JS engine, 因此它无法爬取JavaScript生成的动态网页，只能爬取静态网页，而在现代的网络世界中，大部分网页都会采用JavaScript ...

目前，为了加速页面的加载速度，页面的很多部分都是用JS生成的，而对于用scrapy爬虫来说就是一个很大的问题，因为scrapy没有JS engine，所以爬取的都是静态页面，对于JS生成的动态页面都无法获得。 解决方案： 利用第三方中间件来提供JS渲染服务： scrapy-splash ...

...

0. splash： 美人鱼 溅，泼 1.参考 Splash使用初体验 docker在windows下的安装 https://blog.scrapinghub.com/2015/03/02/handling-javascript-in-scrapy-with-splash ...

安装Splash：执行完下面命令之后，在浏览器中输入http://localhost:8050/打开Splash页面 ...

北京艾丽斯妇科医院（http://fuke.fuke120.com/） 首先先说一下配置splash 1.利用pip安装scrapy-splash库 pip install scrapy-splash 2.现在就要用到另一个神器（Docker） Docker下载地址：https ...