AWS必要了解知识
1.1 切换中文显示 切换前， 注意，在每个页面的都会有这个切换中英语言的选择 这个我觉得并不是所有使用aws的人英语都是很好的，（虽然我们有必要去学习英语会更好），我还是以中文显示讲解 切换后 1.2 常用服务快捷访问 第一种方式： 就是点击控制台左上角的服务后会显示 ...
原文：有必要了解的大数据知识(一) Hadoop
前言 之前工作中,有接触到大数据的需求,虽然当时我们体系有专门的大数据部门,但是由于当时我们中台重构,整个体系的开发量巨大,共用一个大数据部门,人手已经忙不过来,没法办,为了赶时间,我自己负责的系统的大数据相关操作,由我们自己承担了。此前对大数据的知识了解的很少，于是晚上回去花时间突击大数据知识，白天就开始上手干，一边学一边做，总算在部门规定的时间，跟系统一起上线了。后来的维护迭代就交给大数据去了 ...
2021-03-16 16:49 2 778 推荐指数：
相关推荐
Hadoop——你不得不了解的大数据工具
如今Apache Hadoop已成为大数据行业发展背后的驱动力。Hive和Pig等技术也经常被提到，但是他们都有什么功能，为什么会需要奇怪的名字（如Oozie，ZooKeeper、Flume）。 Hadoop带来了廉价的处理大数据（大数据的数据容量通常是10-100GB或更多，同时数据 ...
大数据与Hadoop先导知识
大数据简述 大数据概念 概念 大数据（big data），IT行业术语，是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 数据是实施或观察 ...
数据分析师：大数据建模，你需要了解九大形式
数据挖掘是利用业务知识从数据中发现和解释知识的过程，这种知识是以自然或者人工形式创造的新知识。 第一，目标律：业务目标是所有数据解决方案的源头。 它定义了数据挖掘的主题：数据挖掘关注解决业务业问题和实现业务目标。数据挖掘主要不是一种技术，而是一个过程，业务目标是它的的核心。 没有业务目标 ...
你必须要了解的大数据潮流下的机器学习及应用场景
机器学习是一门人工智能的科学，能通过经验自动改进的计算机算法的研究。 机器学习是一个多学科交叉的领域，会涉及到计算机、信息学、数学、统计学、神经科学等。 机器学习是大数据的核心技术，本质都是基于经验的算法处理。机器学习强调三个关键词：算法、经验、性能，其处理过程如下图所示 ...
大数据知识梳理（Hadoop、HDFS）（整理中。。。）
大数据知识梳理（Hadoop、HDFS）（更新中。。。） 第1讲 大数据概述1.1 大数据时代1.2 大数据概念和影响1.3 大数据的应用1.4 大数据的关键技术1.5 大数据与云计算、物联网 第2讲 大数据处理架构Hadoop2.1 概述2.2 Hadoop项目结构2.3 Hadoop的安装 ...
大数据笔记（一）——Hadoop的起源与背景知识
一.大数据的5个特征（IBM提出）： Volume（大量） Velocity（高速） Variety（多样） Value（价值） Varacity（真实性） 二.OLTP与OLAP 1.OLTP：联机事务处理过程，也称面向交易的处理过程，是对用户操作快速 ...
Hadoop与大数据平台
一、概念 Hadoop诞生于2006年，一个分布式系统基础架构，由Apache基金会开发。Hadoop的主要目标是对分布式环境下的“大数据”以一种可靠、高效、可伸缩的方式处理。 Hadoop框架透明地为应用提供可靠性和数据移动。它实现了名为MapReduce的编程范式：应用程序被分割成许多 ...