1.需求 推荐好友的好友 图1： 2.解决思路 3.代码 3.1MyFoF类代码 说明： 该类定义了所加载的配置，以及执行的map，reduce程序所需要加载运行的类 3.2FMapper类代码 说明： 该类的作用是编写map阶段的代码 ...

原理 如果A和B具有好友关系，B和C具有好友关系，而A和C却不是好友关系，那么我们称A和C这样的关系为：二度好友关系。 在生活中，二度好友推荐的运用非常广泛，比如某些主流社交产品中都会有"可能认识的人"这样的功能，一般来说可能认识的人就是通过二度好友关系搜索得到的，在传统的关系型数据库中 ...

大数据技术之Hadoop（Map-Reduce） 一 MapReduce入门 1.1 MapReduce定义 Mapreduce是一个分布式运算程序的编程框架，是用户开发“基于hadoop的数据分析应用”的核心框架。 Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合 ...

一种错误的理解就是E在A的还有列表中，那么A也在E的列表，且A和E同时有的好友才是共同好友 ，如果按照这个观点思考下去就简单了，但是这个是错的，因为A-E：B，C，D 这种不不满足 正确的理解是求人与人之间的共同好友，人与人之间是否是同一个好友，是否在彼此的好友列表 ...

一、问题定义 我在网上找了些，关于二度人脉算法的实现，大部分无非是通过广度搜索算法来查找，犹豫深度已经明确了2以内；这个算法其实很简单，第一步找到你关注的人；第二步找到这些人关注的人，最后 ...

一、MapReduce案例-流量统计 源数据 源代码 1： 需求一: 统计求和 统计每个手机号的上行数据包总和，下行数据包总和，上行总流量之和，下行总流量之和 分析：以手机号码作为key值，上行流量，下行流量，上行总流量，下行总流量四个字段作为value值，然后以这个key，和value ...

@ 目录 Reduce Join原理 案例实操 需求分析 MR分析 MR实现 ReduceJoin 代码实现 Reduce Join原理 Map端的主要工作：为来自不同表或文件的key/value对，打标签 ...

@ 目录 使用场景 优点 具体办法：采用DistributedCache 案例 需求分析 代码实现 使用场景 Map Join 适用于一张表十分小、一张表很大的场景。 优点 思考：在Reduce 端处理过多的表，非常容易产生数据倾斜。怎么办 ...