kafka--高性能的分布式消息系统
kafka是一个分布式的，高吞吐量的、信息分片存储，消息同步复制的开源消息服务，它提供了消息系统的功能，但是采用了独特的设计。 kafka最初由LinkedIn设计开发，使用Scala语言编写，用作LinkedIn网站的活动流数据和运营数据处理工具，这其中活动流数据是指页面访问量、被查看内容 ...
相关推荐
如何设计高性能的分布式锁
什么是分布式锁？ 在 JVM 中，在多线程并发的情况下，我们可以使用同步锁或 Lock 锁，保证在同一时间内，只能有一个线程修改共享变量或执行代码块。但现在我们的服务都是基于分布式集群来实现部署的，对于一些共享资源，在分布式环境下使用 Java 锁的方式就失去作用了。 使用数据库实现一个分布式 ...
redission 高性能分布式锁
Redis 是最流行的 NoSQL 数据库解决方案之一，而 Java 是世界上最流行（注意，我没有说“最好”）的编程语言之一。虽然两者看起来很自然地在一起“工作”，但是要知道，Redis ...
分布式实时处理系统——C++高性能编程
【前言】基于通信基础，介绍Hurricane实时处理系统的工程实现，主要使用C++语言。 一、IPC、socket、异步I/O epoll 二、C++11 1、linux内存管理中使用RALL原则，C++通过加入 类的构造函数和析构函数 解决资源管理问题。让编译器自己去调用析构函数 ...
EMQ X Enterprise (MQTT Broker) + Apache Kafka 构建高性能物联网消息处理后台
背景 在各类物联网项目中，设备产生的消息不仅仅作用于设备之间，还需要供业务系统使用以实现如安全审计、流量计费、数据统计、通知触发等功能，类似很容易通过以下原型系统完成： 该原型中需要在 EMQ X 上维护多个数据通道，以供每个业务环节按照各自需求从 EMQ X 中获取消息数据。这种解决方案 ...
Hmily：高性能异步分布式事务TCC框架
Hmily框架特性 无缝集成Spring,Spring boot start。 无缝集成Dubbo,SpringCloud,Motan等rpc框架。 多种事务日志的存储方式（ ...
高性能分布式内存队列系统beanstalkd(转)
beanstalkd 一个高性能、轻量级的分布式内存队列系统，最初设计的目的是想通过后台异步执行耗时的任务来降低高容量Web应用系统的页面访问延迟,支持过有9.5 million用户的Facebook Causes应用。后来开源，之后有PostRank大规模部署和使用,每天处理百万级任务. 安装 ...
分布式之高性能IO组件
因为毕业设计（实时分析大型数据流），开始对分布式并行计算做研究，第一个问题就是通讯。高性能的通讯是整个系统性能的基本保障。 方案 就目前的经验来讲，最好的通信选择是：异步非阻塞IO + 资源池。 异步非阻塞是为了避免因IO而阻塞进程（或是线程）而造成计算资源的浪费 使用资源池 ...