这上面那边语句，容易造成数据重复 加入了distinct 就好很多，但是遇到　了一个sum 求和的问题,没有找到解决方案，手动写的 有兴趣的同学，可以告诉我一下 ...

SQL里面通常都会用Join来连接两个表，做复杂的关联查询。比如用户表和订单表，能通过join得到某个用户购买的产品；或者某个产品被购买的人群.... Hive也支持这样的操作，而且由于Hive底层运行在hadoop上，因此有很多地方可以进行优化。比如小表到大表的连接操作、小表进行缓存 ...

第一个sql执行的结果行数少于第二个sql的执行结果。 原因是第一个sql where包含左表条件和右表条件，而第二个sql where只包含左表的条件。 ...

序言：在大数据领域存在一个现象，那就是组件繁多，粗略估计一下轻松超过20种。如果你是初学者，瞬间就会蒙圈，不知道力往哪里使。那么，为什么会出现这种现象呢？在本文的开头笔者就简单的阐述一下这种现象出现的原因，相信对一直陪伴笔者的你会有所帮助。 行文思路 大数据组件来源 Hive ...

大数据篇：Hive hive.apache.org Hive是什么? Hive是Facebook开源的用于解决海量结构化日志的数据统计，是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并且提供类SQL查询功能，本质是将HQL转化成MapReduce程序 ...

最近在做的新闻客户端用到了ViewPager,Android Studio如今集成的很好了，自动创建很多不必要写的代码。 在使用过程中碰到了一个很奇怪的事：ViewPager中加载的数据重复 具体的看图就明白了： 可以看到加载出来的数据，1、2页面出现了重复，而3恢复正常 ...

一、背景介绍 　　最近几天，接到公司的一个将当前大数据平台数据全部迁移到阿里云ODPS平台上的任务。而申请的这个ODPS平台是属于政务内网的，因考虑到安全问题当前的大数据平台与阿里云ODPS的网络是不通的，所以不能使用数据采集工作流模板。 　　然而，考虑到原大数据平台数据量并不是很大 ...

前言 在搭建大数据Hadoop相关的环境时候，遇到很多了很多错误。我是个喜欢做笔记的人，这些错误基本都记载，并且将解决办法也写上了。因此写成博客，希望能够帮助那些搭建大数据环境的人解决问题。 说明: 遇到的问题以及相应的解决办法是对于个人当时的环境，具体因人而异。如果碰到同样的问题，本博客 ...