一.前提： 三台虚拟机（静态IP，关闭防火墙，修改主机名，配置免密登录，集群时间同步） --前面的文章已经提过了，不再赘述。二.在/opt目录下创建文件夹 三.Hadoop下载地址： 四.上传hadoop安装文件到/opt/lagou/software ...

一.什么是Hadoop Hadoop 是一个适合大数据的分布式存储和计算平台。 Hadoop的广义和狭义区分： 狭义的Hadoop:指的是一个框架，Hadoop是由三部分组成：HDFS：分布式文件系统--》存储；MapReduce:分布式离线计算框架--》计算 ...

转载至: http://blog.csdn.net/ynnmnm/article/details/44983545 by 夜风 简单纹理格式 RGBA8888 每个像素4字节，RGBA通道各占用8位 RGBA4444 每个像素2字节，RGBA通道各占用4位 RGB888 ...

列式存储格式与压缩算法 列式存储 在OLAP系统中使用列式存储可以在存储和查询两方面取得优势： 存储：由于每列的数据类型是相同的，列式存储可以达到更好的压缩比 查询：需要查询那些列才去扫描读取，在宽表及数据量大时优势更为明显 常见的列式存储格式有：Parquet、ORC ...

常用数据存储格式介绍 JSON: JavaScript Object Notation(JavaScript 对象表示法) JSON 是存储和交换文本信息的语法。类似 XML。 JSON 比 XML 更小、更快，更易解析。 什么是 JSON ？ JSON 指的是 ...

1、xcall.sh　　批量命令脚本，例：xcall.sh jps ,查看hadoop101~ hadoop104的jps进程 　 注意：在执行命令的时候，若是提示没有这个命令，但是在本机又可以执行，记得在/usr/local/bin 下面创建一个符号连接指向那个命令所在目录 ...

日常操作中我们经常使用到文件压缩操作，其使用一些特定的算法来减小文件的大小，可以提高传输数据时的速率和减少数据在一些存储机制上占有的空间大小，实现空间利用最大化。 比如：如果你想通过邮箱发送一个文件夹，你会发现可能行不通，怎么办呢，难道将文件夹内的内容一个个发送吗？显然不用，因为邮箱不支持 ...

（Record）: Hadoop SequenceFile的存储格式是通用的KV数据存储格式，key和valu ...