什么是ETL?
ETL，是英文 Extract-Transform-Load 的縮寫，用來描述將數據從來源端經過抽取（extract）、交互轉換（transform）、加載（load）至目的端的過程。ETL是將業務系統的數據經過抽取、清洗轉換之后加載到數據倉庫的過程，因而也稱為數據倉庫技術。其目的是將分散 ...
原文：ETL需求要求
前言 ETL落地dw層，dw層各表一般是由多個表關聯取數得到的大寬表，在ETL需求中的dw設計應該考慮以下內容，目的是確保需求更清晰，開發和測試才能更高效的進行。 業務需求為基礎 基於業務需求做足夠多的業務分析，來自客戶的整體業務需求 來自標簽 人群 dashboard等具體的業務需求。 關聯邏輯設計 關聯設計，即表之間的join關系 join之后的過濾條件和取record的邏輯。 明確主表 依賴 ...
2021-08-19 10:39 0 143 推薦指數：
相關推薦
什么是etl
ETL，是英文Extract-Transform-Load的縮寫，用來描述將數據從來源端經過抽取（extract）、轉換（transform）、加載（load）至目的端的過程。 ETL的質量問題具體表現為正確性、完整性、一致性、完備性、有效性、時效性和可獲取性等幾個特性。 要實現ETL，首先要 ...
一個產品從需求到上線的整個規范和要求
一：需求要求 由產品經理發起評審會議，評審郵件包含：需求說明書，原型設計，流程設計。 評審過后，修改后的內容（需求說明書，原型設計，流程設計等）由產品經理統一郵件發出。 二、設計要求 設計應 ...
《刺客信條4：黑旗》配置需求測試，硬件要求高不高
說到《刺客信條》，大家一定會想起鼎鼎大名的育碧蒙特利爾工作室。除了《刺客信條》以外，《波斯王子》、《細胞分裂》、《孤島驚魂》等系列游戲大作均出自他們之手，其中《波斯王子》已經電影化，《刺客信條》隨后也 ...
ETL概念，ETL流程
ETL是將業務系統的數據經過抽取、清洗轉換之后加載到數據倉庫的過程，目的是將企業中的分散、零亂、標准不統一的數據整合到一起，為企業的決策提供分析依據。 ETL是BI項目重要的一個環節。 通常情況下，在BI項目中ETL會花掉整個項目至少1/3的時間,ETL設計的好壞直接關接到BI項目的成敗 ...
ETL是什么
一、ETL發展的背景 信息是現代企業的重要資源，是企業運用科學管理、決策分析的基礎。據統計，數據量每經過2-3年時間就會成倍增長，這些數據蘊含着巨大的商業價值，而企業所關注的通常只占總數據量的2%~4%左右。因此，企業仍然沒有最大化地利用已存在的數據資源，以至於浪費了更多的時間和資金，也失去制定 ...
ETL測試
今天和大家分享下我作為大數據測試工程師對ETL測試的一些認識。 一、ETL測試工程師的主要責任 對於一個ETL測試工程師而言，其關鍵的責任有三大類：1. 源數據分析（包含：數據庫表、文本等類型數據分析）2. 業務轉換邏輯實現（包含：code diff，目標表全量數據的邏輯實現驗證）3. ...