最近公司业务数据量越来越大，以前的基于消息队列的日志系统越来越难以满足目前的业务量，表现为消息积压，日志延迟，日志存储日期过短，所以，我们开始着手要重新设计这块，业界已经有了比较成熟的流程，即基 ...

　　JStorm是一个类似Hadoop MapReduce的系统，不同的是JStorm是一套基于流水线的消息处理机制，是阿里基于Storm优化的版本，和Storm一样是一个分布式实时计算的系统，从开发角度来说，JStorm所有的概念和Storm都相同，所有的编程代码一行不用改也可以直接放到 ...

安装部署 zeromq 简单快速的传输层框架，安装如下： wget http://download.zeromq.org/zeromq-2.1.7.tar.gztar zxf zeromq-2.1.7.tar.gzcd zeromq-2.1.7./configuremakesudo make ...

zookeeper的配置： zookeeper有三种配置方式：单机式/伪分布式/集群式 其中伪分布式是在一台电脑上通过不同的端口来模拟分布式情形，需要N份配置文件和启动程序，而集群式是多个zookeeper程序。 首先通过sftp等方式获取tar包，解压 ...

总结： what：分布式应用的协调服务。用于对分布式系统进行节点管理、leader选举、配置管理等。zookeeper自身也是个分布式系统，有多个节点，具备一致性（借助Paxos算法）、容错性、高可 ...

（有点像流水账，好记性不如烂笔头，权记于此以备忘） 总结： 概念：Broker、Producer、Consumer、Consumer Group、Topic、Partition、Replicati ...

最近在研究jstorm，看了很多资料，所以也想分享出来一些。 安装部署 zeromq 简单快速的传输层框架，安装如下： wget http://download.zeromq.org/zeromq-2.1.7.tar.gztar zxf zeromq-2.1.7.tar.gzcd ...

业余菜鸟第一次使用云服务器搭建大数据集群，下面是所有步骤 微信扫码关注公众号，有意想不到的惊喜哦！！！ ...