想学一下微信小程序，发现文档这东西，干看真没啥意思。所以打算自己先动手撸一个。摩拜单车有自己的小程序，基本功能都有，方便又小巧，甚是喜爱。于是我就萌生了一个给ofo共享单车撸一个小程序(不知道为啥ofo没有小程序)的想法。Let's do ...

背景：端午节假期的时候参加了学校的数学建模比赛，题目是关于共享单车的供需匹配问题，需要获得共享单车的数量和时空分布情况。 在苦苦找寻数据无果的情况下决定自己用爬虫对天津地区的mobike进行统计。 在网上找到了这篇爬虫的代码，本着少造轮子的基本原则，我选择了这个代码进行统计 ...

惯于长夜过春时，挈妇将雏鬓有丝。梦里依稀慈母泪，城头变幻大王旗。忍看朋辈成新鬼，怒向刀丛觅小诗。吟罢低眉无写处，月光如水照缁衣。 ——鲁迅 时代变化之快，让人目瞪口呆。 谁能想到一千年之后 ...

一，爬虫需求分析 1，需求。 　　我们需要获取多个链接的白酒在2018年评论数量。 2，分析。 　　一个商品页面有好几个规格，如图： 评论区我们需要获取的数据是当前选择的商品，而且需要时间顺序为2018年的： 这时候得到的评论有很多页，我们需要一条条的去爬取。 二，误区 ...

这是慕课上的源代码，直接粘贴的，不知道为什么运行一直报错。以下是错误。如果有人解决了，麻烦说一声，谢谢啦。 下面是慕课中修改的代码，也是源代码，直接粘贴的，但是是可以运行出来的。 ...

淘宝商品信息定向爬虫 功能描述 （1）目标：获取淘宝搜索页面信息，提取其中商品的名称和价格 （2）技术路线：Requests-Re 接口描述 （1）搜索接口：https://s.taobao.com/search?q=关键词 （2）翻页接口：第二页 https ...

昨天写了一个小爬虫，爬取了豆瓣上2017年中国大陆的电影信息，网址为豆瓣选影视，爬取了电影的名称、导演、编剧、主演、类型、上映时间、片长、评分和链接，并保存到MongoDB中。 一开始用的本机的IP地址，没用代理IP，请求了十几个网页之后就收不到数据了，报HTTP错误302，然后用浏览器打开 ...

上一次爬取了知乎问题和答案,这一次来爬取知乎用户的信息 一 构造url 首先构造用户信息的url 　　知乎用户信息都是放在一个json文件中,我们找到存放这个json文件的url,就可以请求这个json文件,得到我们的数据. 　url="https://www.zhihu.com ...