原文:數據治理方案技術調研 Atlas VS Datahub VS Amundsen

數據治理意義重大,傳統的數據治理采用文檔的形式進行管理,已經無法滿足大數據下的數據治理需要。而適合於Hadoop大數據生態體系的數據治理就非常的重要了。 大數據下的數據治理作為很多企業的一個巨大的難題,能找到的數據的解決方案並不多,但是好在近幾年,很多公司已經進行了嘗試並開源了出來,本文將詳細分析這些數據發現平台,在國外已經有了十幾種的實現方案。 數據發現平台可以解決的問題 為什么需要一個數據發現 ...

2020-11-11 07:57 1 2716 推薦指數:

查看詳情

數據治理工具調研DataHub

1.項目簡介 Apache Atlas是Hadoop社區為解決Hadoop生態系統的元數據治理問題而產生的開源項目,它為Hadoop集群提供了包括數據分類、集中策略引擎、數據血緣、安全和生命周期管理在內的元數據治理核心能力。 官網地址:http ...

Wed Jul 08 22:55:00 CST 2020 0 2967
數據比對-altas vs amundsen vs TDH-catalog(一)

一、 Altas 屬於apache開源的元數據管理系統,可以對接hive、storm、kafka、hbase、sqoop等組件完成元數據管理以及數據的血緣關系。 系統架構圖: MetaSource Sources:目前,Atlas支持從以下來源提取和管理元數據:Hbase、Hive、Sqoop ...

Mon Aug 30 17:19:00 CST 2021 0 167
DataHub——實時數據治理平台

DataHub 首先,阿里雲也有一款名為DataHub的產品,是一個流式處理平台,本文所述DataHub與其無關。 數據治理是大佬們最近談的一個火熱的話題。不管國家層面,還是企業層面現在對這個問題是越來越重視。數據治理要解決數據質量,數據管理,數據資產,數據安全等等。而數據治理的關鍵就在於 ...

Thu May 07 17:23:00 CST 2020 1 14172
數據治理-Atlas血緣

參考: 官網: https://atlas.apache.org 簡單介紹: https://cloud.tencent.com/developer/article/1544396 GG https://blog.csdn.net/wangpei1949/article ...

Tue Mar 03 01:09:00 CST 2020 0 3174
數據治理的王者——Apache Atlas

一、Atlas是什么? 在當今大數據的應用越來越廣泛的情況下,數據治理一直是企業面臨的巨大問題。 大部分公司只是單純的對數據進行了處理,而數據的血緣,分類等等卻很難實現,市場上也急需要一個專注於數據治理技術框架,這時Atlas應運而生。 Atlas官網地址:https ...

Fri Nov 22 19:03:00 CST 2019 0 813
數據治理開始前,先掌握這個元數據治理神器-Atlas

一、Atlas是什么? 在當今大數據的應用越來越廣泛的情況下,數據治理一直是企業面臨的巨大問題。 大部分公司只是單純地對數據進行了處理,而數據的血緣,分類等等卻很難實現,市場上也急需要一個專注於數據治理技術框架,這時Atlas應運而生。 Atlas官網地址:https ...

Wed Mar 31 07:34:00 CST 2021 0 249
使用 Apache Atlas 進行數據治理

的重要部分。 為尋求數據治理的開源解決方案,Hortonworks 公司聯合其他廠商與用戶於2015年發 ...

Thu May 10 02:35:00 CST 2018 0 15861
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM