个人观点：大数据我们都知道hadoop，但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理，hadoop还是比较适合的，但是对于实时性比较强的，数据量比较大的，我们可以采用Storm，那么Storm和什么技术搭配，才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读 ...

Flume+Kafka+Storm整合 1. 需求： 有一个客户端Client可以产生日志信息，我们需要通过Flume获取日志信息，再把该日志信息放入到Kafka的一个Topic：flume-to-kafka 再由Storm读取该topic：flume-to-kafka，进行日志分析处理 ...

flume-kafka-storm flume读取日志数据，然后发送至kafka。 1、flume配置文件 2、启动flume 3、需要在flume机器上修改hosts文件，添加上kafka的主机名和ip的映射。 4、在kafka上创建主题 ...

现在接触的项目均由webservice的调用方式转为dubbo调用了，所想着自己走一下相关流程，亲身操作一下java服务使用dubbo框架进行调用。 先简单说说dubbo与webservice的区别，两者基于的通信协议不通，dubbo基于rpc：（Remote Procedure Call ...

前言 本篇文章主要介绍的是SpringBoot整合kafka和storm以及在这过程遇到的一些问题和解决方案。 kafka和storm的相关知识 如果你对kafka和storm熟悉的话，这一段可以直接跳过！如果不熟，也可以看看我之前写的博客。一些相关博客如下。 kafka 和 storm ...

1、实时处理框架 即从上面的架构中我们可以看出，其由下面的几部分构成： Flume集群 Kafka集群 Storm集群 从构建实时处理系统的角度出发，我们需要做的是，如何让数据在各个不同的集群系统之间打通（从上面的图示中也能很好地说明这一点），即需要做各个系统之前的整合 ...

转自：http://www.aboutyun.com/thread-9216-1-1.html 使用Storm处理事务型实时计算需求时的几处难点： http://blog.sina.com.cn/s/blog_6ff05a2c0101ficp.html 最近搞日志处理，注意是日志处理，如果用流 ...

个人观点：大数据我们都知道hadoop，但并不都是hadoop.我们该如何构建大数据库项目。对于离线处理，hadoop还是比较适合的，但是对于实时性比较强的，数据量比较大的，我们可以采用Storm，那么Storm和什么技术搭配，才能够做一个适合自己的项目。下面给大家可以参考。可以带着下面问题来阅读 ...