这是一篇科普性质的文章，希望能过用一个通俗易懂的例子给非计算机专业背景的朋友讲清楚大数据分布式计算技术。大数据技术虽然包含存储、计算和分析等一系列庞杂的技术，但分布式计算一直是其核心，想要了解大数据技术，不妨从MapReduce分布式计算模型开始。该理论模型并不是什么新理念，早在2004年 ...

一、Zookeeper 安装 1.zookeeper支持brew安装。 通过brew install zookeeper 安装： 在/usr/local/etc/zookeeper/目录下，已经有了缺省的配置文件 ...

一、缘起 分布式环境下，多台机器上多个进程对一个数据进行操作，如果不做互斥，就有可能出现“余额扣成负数”，或者“商品超卖”的情况，如何实现简易分布式锁，对分布式环境下的临界资源做互斥，是今天将要讨论的话题。 二、互斥原理 原理：多个访问方对同一个资源进行操作，需要进行互斥，通常是利用一个 ...

分布式数据库和分布式存储是分布式系统中难度最大、挑战最大，也是最容易出问题的地方。互联网公司只有解决分布式数据存储的问题，才能支撑更多次亿级用户的涌入。 接下来，你将花费十分钟掌握以下三方面内容： 1、MySQL复制：包括主从复制和主主复制； 2、数据分片：数据分片的原理、分片 ...

CAP理论 2000年7月，Eric Brewer教授提出CAP猜想；2年后，Seth Gilbert和Nancy Lynch从理论上证明了CAP；之后，CAP理论正式成为分布式计算领域的公认定理。 CAP定律说的是在一个分布式计算机系统中，一致性，可用性和分区容错性这三种保证无法同时得到满足 ...

一、简介 　　锁的概念，在Java日常开发和面试中，都是个很重要的知识点。锁能很好的控制生产数据的安全性，比如商品的数量超卖问题等。传统的做法中，可以直接利用数据库锁（行锁或者表锁）来进行数据访问控制。随着请求量逐步变多的情况下，将压力怼到数据库上会对其性能产生极大影响。这时候，单体应用中可以利 ...

基于zk的分布式锁： 　　 大概原理：仍然跟基于db或者redis一致，就是注册节点，然后删除。不同的是zk因为可以对节点的事件进行监听，那么在收到节点删除的事件时，正在阻塞的线程便可以发起新的抢占锁的请求。当然，真正生产的代码一般不是这么写的，因为这样的情况下如果等待的线程 ...

💛分布式解决方案源码,请帮我点个star哦！ 💛原文地址为https://www.cnblogs.com/haixiang/p/13112710.html，转载请注明出处! zookeeper客户端选型 原生zookeeper客户端，有watcher一次性、无超时重连机制等一系列问题 ...