MySQL、Oracle元數據抽取分析


最近接到個任務是抽取mysql和Oracle的元數據,大致就是在庫里把庫、schema、表、字段、分區、索引、主鍵等信息抽取出來,然后導成excel。

因為剛開始接觸元數據,對這個並不了解,就想借助一下萬能的百度,結果百度了一圈全是告訴我sql,直接cv就行了。雖然得到了部分數據,但是查的哪個庫,哪個表我是完全不清楚的,得到的數據也不是我想要的,只有自己去官網看文檔來完成自己的任務。

授人以魚不如授人以漁,把經驗寫出來,給跟我一樣疑惑的小伙伴一個參考。

什么是元數據

百度百科:元數據Metadata),又稱中介數據中繼數據,為描述數據的數據(data about data),主要是描述數據屬性(property)的信息,用來支持如指示存儲位置、歷史數據、資源查找、文件記錄等功能。元數據算是一種電子式目錄,為了達到編制目錄的目的,必須在描述並收藏數據的內容或特色,進而達成協助數據檢索的目的。都柏林核心集(Dublin Core Metadata Initiative,DCMI)是元數據的一種應用,是1995年2月由國際圖書館電腦中心(OCLC)和美國國家超級計算應用中心(National Center for Supercomputing Applications,NCSA)所聯合贊助的研討會,在邀請52位來自圖書館員、電腦專家,共同制定規格,創建一套描述網絡上電子文件之特征。

元數據是關於數據的組織、數據域及其關系的信息,簡言之,元數據就是關於數據的數據。

參考文檔地址

mysql:https://docs.oracle.com/cd/E17952_01/index.html

Oracle:https://docs.oracle.com/en/database/oracle/oracle-database/index.html

先說MySQL

mysql的元數據都在information_schema庫中以視圖的形式存在,只能看,不能修改。

進入文檔后直接看information_schema的介紹,里面詳細介紹了每一個表和字段。

常用的查詢mysql元數據sql

-- 數據庫
SELECT `schema_name` 庫名,`DEFAULT_CHARACTER_SET_NAME` 默認字符集 FROM `SCHEMATA`

-- 表
SELECT `TABLE_NAME` 表名,`TABLE_COMMENT` 描述,`TABLE_TYPE` 表類型  FROM`TABLES`

-- 字段
SELECT `TABLE_SCHEMA` 庫名,`TABLE_NAME` 表名,`COLUMN_NAME` 字段名,`COLUMN_COMMENT` 字段描述,`DATA_TYPE` 字段類型,`CHARACTER_MAXIMUM_LENGTH` 長度,`IS_NULLABLE` 是否為空 
FROM `COLUMNS`

-- 分區
SELECT `TABLE_SCHEMA` 庫名,`TABLE_NAME` 表名,`PARTITION_NAME` 分區名,`PARTITION_ORDINAL_POSITION` 分區編號,`PARTITION_EXPRESSION` 分區函數表達式 
FROM `PARTITIONS` WHERE partition_name IS NOT NULL 

-- 視圖
SELECT * FROM `VIEWS`

-- 索引
SELECT * FROM STATISTICS

-- 主鍵
SELECT * FROM `COLUMNS` WHERE COLUMN_KEY = 'PRI'

再說Oracle

Oracle里的元數據在靜態數據字典視圖。

我們是不能直接訪問數據字典表的,但可以通過數據字典視圖訪問其中的信息。要列出可用的數據字典視圖,查詢視圖DICTIONARY就可以。

在靜態數據字典視圖里有三大類開頭的視圖:ALL_DBA_USER_

  • ALL_視圖顯示所有的信息,當前用戶,包括從其他架構中對象的當前用戶的模式以及信息訪問,如果當前用戶擁有的權限或角色授權的方式訪問這些對象。
  • DBA_視圖顯示整個數據庫中的所有相關信息。DBA_視圖僅供管理員使用。只有擁有SELECT ANY DICTIONARY權限的用戶才能訪問它們。此權限DBA在系統最初安裝時分配給角色。
  • USER_視圖顯示從當前用戶的模式中的所有的信息。查詢這些視圖不需要特殊權限。

ALL_DBA_以及USER_對應於單個數據字典表視圖通常是幾乎相同的。

官網:

然后就可以通過文檔說明找到對應的視圖。

查詢常用的Oracle元數據sql:

-- 模式
SELECT * FROM DBA_TABLESPACES;

-- 表
select * 
from user_tables ut LEFT JOIN user_tab_comments utc ON ut.TABLE_NAME = utc.TABLE_NAME;

-- 字段
select t.TABLE_NAME 表名,t.COLUMN_NAME 描述,t.DATA_TYPE 類型,t.DATA_LENGTH 長度,t.NULLABLE 是否為空,t.DATA_DEFAULT 默認值,s.comments 描述
from user_tab_columns t LEFT JOIN user_col_comments s ON t.COLUMN_NAME = s.COLUMN_NAME WHERE t.TABLE_NAME ='ASSET_BASE_TABLE';

-- 分區
SELECT * FROM USER_PART_KEY_COLUMNS;

-- 索引
SELECT * FROM USER_INDEXES;

-- 視圖
SELECT * FROM USER_VIEWS;

-- 主鍵
select cu.* from USER_CONS_COLUMNS cu, USER_CONSTRAINTS au 
where cu.constraint_name = au.constraint_name and au.constraint_type = 'P';

以上就是我個人查找元數據的流程,如有不對的地方,歡迎在評論區指正。


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM