大数据：阿里数据整合及管理体系 OneData
面对爆炸式增长的数据，如何建设高效的数据模型和体系，对这些数据进行有序和有结构地分类组织和存储，避免重复建设和数据不一致性，保证数据的规范性，一直是大数据系统建设不断追求的方向。 数据仓库模型实施过程： 首先，在建设大数据数据仓库时，要进行充分的业务调研和需求分析。这是 ...
原文：论文解读--大数据平台数据的安全管理体系架构设计
论文解读 大数据平台数据的安全管理体系架构设计 胡志达 电信 摘要： 引出问题：数据的安全管理存在数据传输不可靠 数据丢失 数据泄露等问题 大数据平台的安全管理体系：数据安全采集层 存储层 使用层 数据安全采集层：从数据分类 数据分级 敏感数据识别 数据脱脱敏 多类型加密机制， 个维度保障数据安全 数据安全存储层：从多维度数据安全存储机制 基于网络安全等级保护制度的安全评测两个维度保障数据安全 ...
2021-10-13 21:54 0 168 推荐指数：
相关推荐
大数据平台架构设计探究
进行管理，利用大数据和机器学习能力去挖掘、识别、利用数据资产。如果缺乏有效的数据整体架构设计或者部分能 ...
紫金大数据平台架构之路（一）----大数据任务开发和调度平台架构设计
一、总体设计 初来公司时，公司还没有大数据，我是作为大数据架构师招入的，结合公司的线上和线下业务，制定了如下的大数据架构路线图。 二、大数据任务开发和调度平台架构设计 在设计完总体架构后，并且搭建完hadoop/yarn的大数据底层计算平台后， 按照总体架构设计思路， 首先需要构建 ...
[读书笔记]《大数据之路》——阿里数据整合及管理体系——OneData模型
阿里数据整合及管理体系——OneData模型 摘要 阿里的《大数据之路》第9章介绍了其内部进行数据整合及管理的方法体系和工具OneData。他们在这一体系下，构建统 、规范、可共的全域数据体系，避免数据的冗余和重复建设，规避数据烟囱和不一致性，了解他们的建模理论，有助于扩宽我们对数据建模的视野 ...
基于Hadoop的大数据平台实施记——整体架构设计
大数据的热度在持续的升温，继云计算之后大数据成为又一大众所追捧的新星。我们暂不去讨论大数据到底是否适用于您的组织，至少在互联网上已经被吹嘘成无所不能的超级战舰。好像一夜之间我们就从互联网时代跳跃进了大数据时代！关于到底什么是大数据，说真的，到目前为止就和云计算一样，让我总觉得像是在看电影《云图 ...
GPS部标监控平台的架构设计(八)-基于WCF的平台数据通信设计
总体来讲，GPS部标平台的软件开发是一个对网络通信和应用程序之间通信的技术应用密集型的开发工作，也是有一定设计技术含量的工作。 1.设计通信接口 在设计的时候，根据职责划分，拆分成不同的应用子系统，对各个子系统进行功能隔离，并通过设计接口规定子系统直接的调用规约。 首先我们根据部标平台的要求 ...
[大数据运维]第29讲：大数据平台的硬件规划、网络调优、架构设计、节点规划
第29讲：大数据平台的硬件规划、网络调优、架构设计、节点规划 高俊峰（南非蚂蚁） 这一课时，我将向你介绍 Hadoop 大数据平台的硬件选型、网络方面的架构设计和存储规划等内容。 大数据平台硬件选型 要对 Hadoop 大数据平台进行 ...
大数据平台安全标准设计
从应用角度看，需大数据平台提供如下4项安全功能： 图1 大数据平台安全功能 1、边界——限制只有合法用户身份的用户访问大数据平台集群 （1） 用户身份认证：关注于控制外部用户或者第三方服务对集群的访问过程中的身份鉴别，这是实施大数据平台安全架构的基础；用户在访问启用了安全 ...