作者:杨鑫奇 前言 做大数据相关的后端开发工作一年多来,随着Hadoop社区的不断发展,也在不断尝试新的东西,本文着重来讲解下Ambari,这个新的Apache的项目,旨在让大家能够方便快速的配置和部署Hadoop生态圈相关的组件的环境,并提供维护和监控的功能. 作为新手,我讲讲我自己的学习经历,刚刚开始学习的时候,当然最简单的 Google 下Hadoop ,然后下载相关的包,在自己的虚拟机 C ...
2013-05-18 12:07 11 57912 推荐指数：
立个坑，教程后续补上，当然这不是最重要的，如果你仅仅想有个环境可以测试，只需要下面 三步 1.git clone https://github.com/hulichao/docker-bigdata ` 2.安装docker和docker-compose, 然后cd ...
系统环境搭建： #2.复制出来的虚拟机配置ip方法#1.删除mac地址 vi /etc/sysconfig/network-scripts/ifcfg-eth0#HWADDR="00:0C:29:64:6A:F9"#2.删除网卡和mac地址绑定的文件 rm -rf /etc ...
系统 centos7 远程连接工具MobaXterm 一、虚拟机 虚拟机配置 下载安装VMware Station，下载centos7 新建虚拟机 下一步 稍后安 ...
先从大数据数据仓库建设的整体架构说起。 下图是数据仓库的逻辑分层架构： 想看懂数据仓库的逻辑分层架构，必须先弄懂以下4大概念。 数据源：数据来源，互联网公司的数据来源随着公司的规模扩张而呈递增趋势，同时自不同的业务源，比如埋点采集，客户上报，API等。 ODS层：数据仓库源头系统 ...
版本规划 安装VirtualBox 然后直接一路下一步 选择一下安装路径 ...
1、解压hbase安装包 2、将大数据环境得hadoop安装包拷贝到windows(这里以d:/hadoop为例) 3、打开C:\Windows\System32\drivers\etc目录下的hosts并添加如下代码 127.0.0.1 localhost192.168.48.134 ...
目录 HDP部署安装手册... I 1、环境配置... 3 1.1、关闭防火墙服务（所有节点）... 3 1.2、配置SSH免密码登录... 3 1.3、搭建本地http服务（主节点）... 4 1.4、配置hosts域名映射（所有节点）... 5 1.5 ...
mongodb在存储大数据时，对查询的字段需要添加索引，我测试的是阿里云30多万的数据量，不加索引查询已经到8秒，而添加索引之后是毫秒级！ 为集合加索引 mongodb支持内嵌属性添加索引 添加唯一索引 createIndex建立索引时的参数 ...
