scrapy系列教程三——爬天涯热门论坛
1.创建工程CpsecSpiders scrapy 命令行工具：scrapy startproject CpsecSpiders 2.工程CpsecSpiders的目录结构：cd CpsecS ...
原文：浅析 天涯论坛 回复验证策略
发帖没多久，算法就更新了，就算我重新分析，人家依然会更新，所以还是自己学着分析吧。 对于现在 POST 技术满天飞的时代，防机器人确实是很头疼的一件事情，类似流量精灵这样的东西，他可以做到 的真实信息，大批量的访问。当然今天不谈这些，只是分析下 天涯论坛 回复时的验证策略。 昨天谈到 packer 压缩，今天我们来看个实例吧。http: bbs.tianya.cn m reply.jsp item ...
2014-05-15 20:47 9 1815 推荐指数：
相关推荐
python实现网络爬虫下载天涯论坛帖子
最近发现天涯论坛是一个挺有意思的网站，有各种乱七八糟的帖子足以填补无聊时候的空虚感，但是相当不爽的一件事就是天涯的分页模式下想连贯的把楼主的内容看完实在是太心酸了，一个999页的帖子，百分之九十都是无聊网友的灌水，有时候连续翻几十页才能找到楼主的一条内容。所以无聊之下，就打算写一个简单的爬虫 ...
python 网络爬虫（一）爬取天涯论坛评论
我是一个大二的学生，也是刚接触python，接触了爬虫感觉爬虫很有趣就爬了爬天涯论坛，中途碰到了很多问题，就想把这些问题分享出来， 都是些简单的问题，希望大佬们以宽容的眼光来看一个小菜鸟😄，这也是我第一次写博客，代码有哪里写的不好的地方，需要改进的地方希 望大家也可以帮我指出。 用到的包 ...
DDD实践问题之 - 关于论坛的帖子回复统计信息的更新的思考
之前，在用ENode开发forum案例时，遇到了关于如何实现论坛帖子的回复的统计信息如何更新的问题。后来找到了自己认为比较合理的解决方案，分享给大家。也希望能和大家交流，擦出更多的火花。 论坛核心领域问题分析 论坛领域的核心概念是：帖子、回复。大家都知道，一个帖子可以有零个或多个回复。对同一个 ...
discuz论坛几种安全策略（一）
安全问题 最近公司准备搭建一个discuz论坛，大头让我调研一下discuz的安全策略，并提出如下几点要求： 1、防止php上传漏洞2、防止大量刷新攻击限制某个IP大量刷新某一页面导致论坛宕机3、防止恶意注册、发帖限制用户IP大量注册、大量发帖关键字过滤 针对策略 我调研了相关的资料，针对 ...
ThreadPoolExecutor八种拒绝策略浅析
转自：http://www.kailing.pub/article/index/arcid/255.html 前言 谈到java的线程池最熟悉的莫过于ExecutorService接口了，jdk1 ...
discuz X论坛技术架构 MVC结构浅析
摘自：http://yeyuan.iteye.com/blog/930727 PS：本人刚接触discuz论坛，php水平有限，当中的理解，如有不正确之处，欢迎指出 ------------------------------------ 第一个文件相当于控制器(C)，比如forum.php ...