元數據管理
1、什么是元數據？ hdfs的目錄結構及每一個文件的塊信息（塊的id，塊的副本數量，塊的存放位置<datanode>） 2、元數據由誰負責管理？ namenode 3、namenode把元數據記錄在哪里？ namenode的實時的完整的元數據存儲在內存中 ...
原文：元數據管理系統的研究與實現
我的新浪微博：http: weibo.com freshairbrucewoo。 歡迎大家相互交流，共同提高技術。 元數據管理系統的研究與實現 摘 要: 元數據就是描述數據的數據，隨着信息技術的快速向前發展,元數據在地理空間信息資源共享過程中起着關鍵的作用。元數據有自己的標准，這個標准的主要作用是介紹了元數據的組成元素和分類應用，提出了一些元數據建庫的基本原則，並且給出了基於XML格式的元數據管 ...
2012-02-01 23:19 1 14786 推薦指數：
相關推薦
DMBOK：元數據管理
本文更新版本已挪至 http://www.zhoujingen.cn/blog/4178.html -------------------------------- BI的成功運用深度依賴於有效的元數據管理，通常被稱作"關於數據的數據"。元數據為所有BI系統的數據充當 ...
hive元數據管理
HIVE元數據整理dbs: 存放database信息，包括數據庫名稱、DB_LOCATION_URI、主鍵為DB_IDtbls：存放table信息，包括表名稱，表類型（內部、外部）、主鍵TBL_ID，外鍵DB_ID關聯database表，SD_ID關聯表參數信息sds：存放table參數信息，包括 ...
HDFS元數據管理機制
元數據管理概述 HDFS元數據，按類型分，主要包括以下幾個部分： 1、文件、目錄自身的屬性信息，例如文件名，目錄名，修改信息等。 2、文件記錄的信息的存儲相關的信息，例如存儲塊信息，分塊情況，副本個數等。 3、記錄 HDFS 的 Datanode 的信息，用於 ...
一個基於圖的數據管理系統-gStore
gStore是遵循 BSD協議的一個開源項目。一個基於圖的 RDF 三元組存儲的數據管理系統。該項目是北京大學、滑鐵盧大學、香港科技大學的聯合研究項目。中國北京大學計算機科學與技術研究所的數據庫組對該系統進行開發和維護。目前尚未商業化，需通過技術轉讓或授權使用 ...
分布式存儲系統之元數據管理的思考
在使用和設計分布式存儲系統時，非常重要的一個環節是數據尋址，即定位一個key的數據副本存放在哪個機器(甚至哪塊磁盤)；目前有幾種常用的解決方案：中心節點管理元數據，分布式管理元數據，無元數據設計；本文結合自身經驗談談三種方案的特點： 1.中心節點管理元數據：在設計分布式(存儲)系統時，使用 ...
元數據管理和數據采集
公司是大數據公司，其中有一塊業務主要是大數據的相關內容。我們測試部門也有同事專門對針對這個平台進行測試。由於我們公司有一個平台是做數治工坊的相關內容，其中從元數據管理、流程管理、配置管理、運維監控，整個主流程的了解，加深了對大數據的了解。經過同事的講解和培訓，初步了解了什么是元數據管理、流程 ...