最近学习了下webmagic，学webmagic是因为想折腾下爬虫，但是自己学java的，又不想太费功夫，所以webmagic是比较好的选择了。 写了几个demo，源码流程大致看了一遍。想着把博客园的文章列表爬下来吧。 首页显示的就是第一页文章的列表， 但是翻页按钮不是链接，而是动态 ...

初学Python，用python写的一个简单爬虫，爬取自己博客园上面的所有文章。 爬取后的网页会保存在项目的根目录下，暂时未支持js、css等文件的爬取，所以页面显示效果会比较差。 ...

首先，在items.py中定义几个字段用来保存网页数据（网址，标题，网页源码） 如下所示： 最重要的是我们的spider，我们这里的spider继承自CrawlSpider，方便我们定义正则来提示爬虫需要抓取哪些页面。 如：爬去下一页，爬去各个文章 在spdier中，我们使用 ...

由于显示效果并不理想，现已弃用，新的博客是基于LessIsMore模板定制而来。 0x01 效果展示 先给大家看一下最终的实现效果，如果你觉的还可以，那么请继续阅读。 在此首先要感谢marvin和asxinyu，我这次目录的实现基本是结合了他们二人的成果，在此特别致谢。下面 ...

博客园上传markdown格式文章 一、首先下载脚本文件 [ ] 需要电脑内置python3 功能很香！！！ git clone git@github.com:dongfanger/pycnblog.git 或者直接手动下载：下载地址 安装一个第三方库，cmd命令行安装即可 ...

　　最近在开发一个博客系统，经常把写的东西放在自己网站的博客上（之前写在Onenote），然后我在博客园也申请了一个博客，就有了同样一篇文章，我需要复制粘贴排版分别提交两次的情况。于是我就想能不能在我的网站内提交后直接把这篇文章同步提交至博客园甚至是其他第三方博客呢，所以花点时间实现了这个功能 ...

有小伙伴问到方格背景的问题，所以写一篇文章记录我的博客园文章背景是如何制作的。 一、辅助网站1. 一键排版2. 代码主题3. 复制二、 图床设置 一、辅助网站 辅助网址：Md2All 作者提供了一篇帮助文章：玩转公众号Markdown 其实大致看完辅助网址里 ...

了，觉得很高兴，说明我写的文章有价值。 后来很多博客园的朋友在我的文章里留言，说我的文章是抄袭别人的。 ...