CDP 平台簡介


簡介: EDC 建立在 Cloudera Data Platform(CDP) 之上,該產品結合了 Cloudera Enterprise Data Hub 和 Hortonworks Data Platform Enterprise 的優點,並在技術堆棧中增加了新功能和對已有技術提供了增強功能。這種統一的發行是一個可擴展且可自定義的平台,您可以在其中安全地運行多種類型的工作負載。

企業數據雲概述

企業對大數據解決方案的要求:只要有必要,就可以在一個地方以原始的保真度來獲取和合並任何數量或類型的數據,並盡可能快地向所有用戶提供洞察力。

企業數據雲公司 Cloudera 引入了企業數據雲(EDC)的概念:數據驅動的企業需要能夠對無處不在的數據應用多種分析規則;能夠以流式的方式傳輸和處理來自邊緣多個端點的實時數據,同時預測關鍵結果並在同一數據集上應用機器學習技術;能夠充分利用公有雲基礎架構的敏捷性、靈活性以及日益龐大的數據引力;此外,能夠在開放平台上完成所有這些工作,在數據存放和分析運行的所有位置都能應用數據安全和治理。這就是業界所說的企業數據雲。

EDC 具有以下特點:

  • 混合雲和多雲支持:提供選擇來管理、分析和試驗任何公有雲和私有數據中心中的數據,以實現最大的選擇和靈活性。
  • 多功能分析:解決最苛刻的業務用例 – 跨共享數據大規模地應用實時流處理、數據倉庫、數據科學和迭代機器學習。
  • 安全性和治理:通過通用的安全模型來控制任何雲(公有雲、私有雲和混合雲)上的數據,簡化了各種企業數據的數據隱私和合規性。
  • 開放:促進開源社區的創新、提供開放存儲和計算架構的選擇性以及促進廣泛的生態系統的信心和靈活性

企業數據雲平台不但提供企業級的安全性和治理能力,還同時提供多種分析功能用於數據分析,具備在內部和外部部署相同功能的能力,支持主要的公有雲和私有雲環境、使得用戶獲得彈性的雲體驗,並不再存在數據孤島和單一供應商鎖定的威脅。

image.png

EDC 不但可以靈活地運行各種企業工作負載(例如:實時攝取和分析、數據工程、交互式 SQL、企業搜索、高級分析和機器學習),還滿足企業的要求:與企業現有的系統進行集成,同時提供強大的安全性、數據治理、數據保護和管理能力。EDC 是企業數據管理的新興中心。

CDP平台簡介

EDC 建立在 Cloudera Data Platform(CDP) 之上,CDP 是 Cloudera 公司的最新產品,該新產品結合了 Cloudera Enterprise Data Hub 和 Hortonworks Data Platform Enterprise 的優點,並在技術堆棧中增加了新功能和對已有技術提供了增強功能。這種統一的發行是一個可擴展且可自定義的平台,您可以在其中安全地運行多種類型的工作負載。

6553CB1E-6F56-4d54-AB04-BA151C69DCCB.png

除了需要企業數據雲外,企業還希望將這種強大的數據管理基礎架構遷移或添加到雲中,以提高運營效率、降低成本、提供計算和容量靈活性以及速度和敏捷性。

隨着組織在雲環境中采用基於 Hadoop 的大數據部署,他們還需要企業級的安全性和治理、多種分析功能、管理工具和技術支持-所有這些需求都是 CDP 平台的一部分,下圖展示了 CDP 平台的功能地圖。

image.png

CDP 支持各種混合解決方案,其中計算任務與數據存儲分離,並且可以從遠程集群訪問數據。這種混合方法通過管理存儲、表 Schema、身份驗證、授權和治理,並為容器化應用程序提供了基礎。

CDP 包括各種組件,例如 Apache HDFS、Apache Hive 3、Apache HBase 和 Apache Impala,以及許多其他用於特殊工作負載的組件。您可以選擇這些服務的任意組合來創建滿足您的業務需求和工作負載的集群。幾個預配置的服務包也可用於常見的工作負載。

Cloudera Manager 概覽

Cloudera Manager 是用於管理、配置和監控 CDP 集群和 Cloudera Runtime 服務的應用程序。

Cloudera Manager 服務器在CDP部署中的主機上運行,並使用在集群中每個主機上運行的 Cloudera Manager 代理來管理一個或多個集群。

Cloudera Manager 是用於管理集群的端到端應用程序。借助 Cloudera Manager,您可以輕松地部署和集中操作完整的 Cloudera Runtime 堆棧和其他托管服務。該應用程序可自動執行安裝和升級過程,並為您提供主機和正在運行的服務的整個群集的實時視圖。Cloudera Manager 管理控制台提供了一個中央控制台,您可以在其中對整個集群進行配

置更改,並結合了各種報告和診斷工具來幫助您優化性能和利用率。Cloudera Manager還管理安全性和加密功能。使用 Cloudera Manager 管理控制台,您可以啟動和停止集群以及單個服務、配置和添加新服務、管理安全性以及升級集群。您還可以使用 Cloudera Manager API 以編程方式執行管理任務。

Cloudera Manager 的單個實例可以管理多個集群,包括較舊版本的 Cloudera Runtime 和 CDH。

Cloudera Runtime

Cloudera Runtime 是 CDP Private Cloud Base 中的核心開源軟件發行版。Cloudera Runtime 包括大約50個開源項目,這些項目構成 CDP 中數據管理工具的核心分發。該庫中記錄了 Cloudera Runtime 組件。

工具

CDP 還包括以下工具來管理和保護您的部署:

  • Cloudera Manager 允許您使用 Cloudera Manager 管理控制台的 Web 應用程序或Cloudera Manager API 管理、監控和配置集群和服務。
  • Apache Atlas 提供了一組元數據管理和治理服務,使您能夠管理 CDP 集群資產。
  • Apache Ranger 通過用戶界面管理訪問控制,以確保 CDP 集群中一致的策略管理。

原文鏈接
本文為阿里雲原創內容,未經允許不得轉載。 


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM