原文:一个爬虫的故事:这是人干的事儿?

爬虫原理 我是一个爬虫,每天穿行于互联网之上,爬取我需要的一切。 说起来还要感谢HTTP协议,因为它,全世界的网站和浏览器才能够连接通信,而我也是借助HTTP协议,获取我想要的数据。 我只需要伪装成一个浏览器,向服务器发送HTTP请求,就能拿到网页HTML文件。 接着,我再按照HTML的格式规范,去解析其中的图片 lt img gt 链接 lt a gt 表单 lt form gt 等等我关注的信 ...

2020-10-10 09:36 32 6719 推荐指数:

查看详情

这是我的故事 —— 胡浩

作者:胡浩 校对/文章优化:刘轶民 视频地址:https://www.bilibili.com/video/BV185411J7mW 前言 先简单做一个自我介绍,我叫胡浩。虽然偶尔写简单的代码,但坦白来说我并不是做开发的,现在主要的工作是数字化工作空间和IT基础架构方面的。我是十六 ...

Thu Feb 25 04:10:00 CST 2021 0 473
一个成功的QQ机器框架和一个垃圾代码制造者的故事

起因 为了在学校的生活方便,大佬学长们创建了一个QQ机器,毕竟95后的IM(Instant Message)世界还是以QQ为主,所以机器就很方便的查询到一些数据,群聊的时候也能带来一些快乐(因为有自动回复功能),然后……直到2020年1月21日,学长在群里面说被后台封了,QQ和IP都被 ...

Mon Mar 09 01:11:00 CST 2020 0 1136
这是一个顶的置

个人介绍 老年高二 OIer,坐标长沙一中 水平不行,只会做签到题 博客内容相关 真的不想让看的东西就不会放上来了,放上来还是希望有看的 除了考试总结因为版权问题不太方便外传,所以把密码设为 YZOJ 上我的 rating 外,其他的东西应该不会设密码了 不想让看还放上来那不就 ...

Wed Dec 15 18:21:00 CST 2021 5 49
这是一个月薪10k的24岁程序员男子和月薪3k的22岁市场女子的故事,你们有吗?

男子:月薪10k,软件工程师,上进,孝顺,挚爱他挚爱的每一个人,包括女子。每一分钱首先想到的是报答帮助过的他的每一个人,工作两年,工资大多全部为家里还债、房租、为家里房子装修了一下、补充了一些家电,而对于女子则满足衣服、手机、零食等需要,没有过多的比如电影、旅游之类的活动,两年工作 ...

Wed Jun 12 08:59:00 CST 2013 460 29284
设计爬虫Hawk背后的故事

本文写于圣诞节北京下午慵懒的午后。本文偏技术向,不过应该大部分能看懂。 五年之痒 2016年,能记入个人年终总结的事情没几件,其中一个便是开源了Hawk。我花不少时间优化和推广它,得到的评价还算比较正面,因为负面评价也没什么渠道进我耳朵。 不过你知道我写这个东西花了多久吗? 掐头去尾,这是 ...

Thu Jan 05 23:17:00 CST 2017 12 2620
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM