这几天朋友说想看电子书，但是只能在网上看，不能下载到本地后看，问我有啥办法？我找了好几个小说网址看了下，你只能直接在网上看，要下载txt要冲钱买会员，而且还不能在浏览器上直接复制粘贴。之后我就想到python的爬虫不就可以爬取后下载吗？ 　　码源下载： 　　　　https ...

概述 后台数据库几个基本表基本搭建完毕，看了下Github Develop的V4 Api抛弃了RESTful，采用GraphQL，感觉很有意思，一看文档，竟然有Python的开源实现 Graphen ...

闲来无事用Python的scrapy框架练练手，爬取顶点小说网的所有小说的详细信息。 看一下网页的构造： tr标签里面的 td 使我们所要爬取的信息 下面是我们要爬取的二级页面 小说的简介信息： 下面上代码： mydingdian.py items.py ...

什么是网络爬虫 网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。 环境：Python3.6+Windows 开发工具 ...

随便说点什么 　　因为在学python，所有自然而然的就掉进了爬虫这个坑里，好吧，主要是因为我觉得爬虫比较酷，才入坑的。 　　想想看，你可以批量自动的采集互联网上海量的资料数据，是多么令人激动啊！ ...

...

python爬虫之小说网站--下载小说(正则表达式) 思路: 1.找到要下载的小说首页,打开网页源代码进行分析(例:https://www.kanunu8.com/files/old/2011/2447.html) 2.分析自己要得到的内容,首先分析url,发现只有后面的是变化的，先获得小说 ...

本次是小阿鹏，第一次通过python爬虫去爬一个小说网站的小说。 下面直接上菜。 　　1.首先我需要导入相应的包，这里我采用了第三方模块的架包，requests。requests是python实现的简单易用的HTTP库，使用起来比urllib简洁很多，因为是第三方库，所以使用前需要cmd安装 ...