手写一个 JAVA 线程池
池化是我们在实际生产中经常用到的一种思想，通过一个 “池” 把资源统一的管理起来。可以达到对资源的合理管理、重复利用、减少资源创建/销毁的开销等目的。 常见的比如常量池、连接池、线程池，今天我们手撸一个线程池。 抛开语言特性，线程池无非是维护一堆线程阻塞等待任务的到来，并由主线 ...
原文：爬虫入门 手写一个Java爬虫
本文内容涞源于 罗刚老师的书籍 lt lt 自己动手写网络爬虫一书 gt gt 本文将介绍 : 网络爬虫的是做什么的 :手动写一个简单的网络爬虫 :网络爬虫是做什么的 他的主要工作就是 跟据指定的url地址去发送请求,获得响应,然后解析响应 ,一方面从响应中查找出想要查找的数据,另一方面从响应中解析出新的URL路径, 然后继续访问,继续解析 继续查找需要的数据和继续解析出新的URL路径 . 这就是 ...
2017-11-18 17:38 28 114611 推荐指数：
相关推荐
[python]新手写爬虫v2.5（使用代理的异步爬虫）
开始 开篇：爬代理ip v2.0(未完待续），实现了获取代理ips，并把这些代理持久化（存在本地）。同时使用的是tornado的HTTPClient的库爬取内容。 中篇：开篇主要是获取代理ip；中篇打算使用代理ip，同时优化代码，并且异步爬取内容。所以接下来，就是写一个：异步，使用代理的爬虫 ...
java爬虫入门，一个简单的jsoup教程（1）
jsoup是一款简单好用的页面解析工具，百度可以找到中文教程，我这里只是作为个人笔记的总结。 首先是下载jar包，有三个在页面：https://jsoup.org/download 处可以找到下载.下载好了放进项目里就好 然后构建一个普通的javaSE项目。。。 获取页面之前首先第一步应该是 ...
如何开始写你的第一个python脚本——简单爬虫入门！
好多朋友在入门python的时候都是以爬虫入手，而网络爬虫是近几年比较流行的概念，特别是在大数据分析热门起来以后，学习网络爬虫的人越来越多，哦对，现在叫数据挖掘了！ 其实，一般的爬虫具有2个功能：取数据和存数据！好像说了句废话。。。 而从这2个功能拓展，需要的知识就很多了：请求数据、反爬 ...
手写一个promise
promise是什么？ promise是一个解决回调地狱的函数，是一个强大的异步回调方案。es6将其弄可以直接使用！ 我们知道promise中共有三种状态 pending 过渡态fulfilled 完成态rejected 失败态 简单 的 promise就实现了 ...
[Python]新手写爬虫全过程（已完成）
今天早上起来，第一件事情就是理一理今天该做的事情，瞬间get到任务，写一个只用python字符串内建函数的爬虫，定义为v1.0，开发中的版本号定义为v0.x。数据存放？这个是一个练手的玩具，就写在txt文本里吧。其实主要的不是学习爬虫，而是依照这个需求锻炼下自己的编程能力，最重要的是要有一个清晰 ...
教你如何使用Java手写一个基于数组实现的队列
数据在后端进行添加。 在Java中队列又可以分为两个大类，一种是阻塞队列和非阻塞队列。 1 ...
教你如何使用Java手写一个基于链表的队列
在上一篇博客【教你如何使用Java手写一个基于数组的队列】中已经介绍了队列，以及Java语言中对队列的实现，对队列不是很了解的可以我上一篇文章。那么，现在就直接进入主题吧。 这篇博客主要讲解的是如何使用单链表实现一个简单版的队列。单向链表队列是属于非循环队列，同时队列的长度是不受 ...