原文:ZeroCrawler V0.1:多线程爬虫

ZeroCrawler V . 是一只简单的多线程爬虫,其基本架构如下: 整个程序是这样运作的:Scheduler不断从Queue取出URL,如果发现可用的爬虫 空闲线程 ,那么就将URL分给一只爬虫。然后爬虫完成下载网页,抽取URL,保存网页的工作后就回归Scheduler 变回空闲线程 。直到Queue没有待爬取的URL,并且所有爬虫都空闲下来,就停止程序。 Scheduler的主要工作就是 ...

2012-11-27 20:57 3 3963 推荐指数:

查看详情

Android Studio v0.1尝鲜

昨天Google I/O开发者大会上宣布,Android Studio 0.1的前瞻版发布了,今早马上下载尝下鲜。 下载地址如下: https://developer.android.com/sdk/installing/studio.html 很显然的IntelliJ IDEA的样貌,下面 ...

Thu May 16 16:26:00 CST 2013 60 13508
我的MVVM框架 v0.1发布

如果经常浏览我博客的人就发现,我三个月前就搞鼓过一下什么MVVM与MVC的比较,knockout.js与ember.js。然后就没动静了,因为之后一个月,我的MVVM就孵化出来,开发代码很逆天也很龌鹾 ...

Sat Sep 15 18:14:00 CST 2012 10 4884
[PaPaPa][需求说明书][V0.1]

PaPaPa软件需求说明书V0.1   前 言   我觉得我们废话不能多,废话一多的话大家就找不到重点了,其实本项目是出于技术研究的目的来开发的,大家讨论了半天决定要做社(yue)交(pao)类的项目。   经过第一版本的深思我们准备做旅游,行程预定。然后轨道越来越远,瞬间感觉 ...

Thu Jan 08 00:00:00 CST 2015 6 1072
Postgresql 数据库错误修复v0.1

PS. 查询\nebula_boh\logs\BOHInterfaceLog.log 日志, 一般数据库文件损坏的日志 有 “UncategorizedSQLException” 或 “zero p ...

Tue Jan 29 22:07:00 CST 2019 0 740
【原创】oracle提权执行命令工具oracleShell v0.1

帮一个兄弟渗透的过程中在内网搜集到了不少oracle连接密码,oracle这么一款强大的数据库,找了一圈发现没有一个方便的工具可以直接通过用户名密码来提权的。想起来自己之前写过一个oracle的连接工 ...

Thu Nov 30 22:35:00 CST 2017 6 5228
oracle提权执行命令工具oracleShell v0.1

from:https://www.cnblogs.com/rebeyond/p/7928887.html 帮一个兄弟渗透的过程中在内网搜集到了不少oracle连接密码,oracle这么一款强大 ...

Sun Feb 06 03:03:00 CST 2022 0 695
基于COCA词频表的文本词汇分布测试工具v0.1

美国语言协会对美国人日常使用的英语单词做了一份详细的统计,按照日常使用的频率做成了一张表,称为COCA词频表。排名越低的单词使用频率越高,该表可以用来统计词汇量。 如果你的词汇量约为6000,那么这 ...

Tue Jun 23 01:01:00 CST 2020 0 941
 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM