Azure Data Factory (1) ADF入門
《Windows Azure Platform 系列文章目錄》 我們在做數據分析和數據轉換的時候，經常會遇到ETL的場景，所謂ETL就是英文Extract-Transform-Load的縮寫，用來描述將數據從來源端經過抽取（extract）、轉換（transform）、加載 ...
原文：Azure Data Factory（一）入門簡介
一，引言 今天分享一個新的Azure 服務 Azure Data Factory Azure 數據工廠 ，怎么理解，參考根據官方解釋 數據工廠解釋：大數據需要可以啟用協調和操作過程以將這些巨大的原始數據存儲優化為可操作的業務見解的服務。Azure 數據工廠是為這些復雜的混合提取 轉換 加載 ETL 提取 加載 轉換 ELT 和數據集成項目而構建的托管雲服務。 說簡單點，Azure Data Fac ...
2020-10-29 15:33 10 2520 推薦指數：
相關推薦
Azure Data Factory（二）復制數據
一，引言 上一篇主要只講了Azure Data Factory的一些主要概念，今天開始新的內容，我們開始通過Azure DevOps 或者 git 管理 Azure Data Factory 中的源代碼，同時創建 Pipleline 將 Azure Blob1 的 Container ...
Azure Terraform（一）入門簡介
一，引言 眾所周知，當企業將項目整體架構資源遷移到雲上，雲基礎設施架構師就要根據現有項目搭建整體項目的基礎設施資源的架構，然后我們的雲運維工程師就要根據設計好基礎設施的架構圖來創建雲上資源，但是 ...
Azure Data Factory（三）集成 Azure Devops 實現CI/CD
一，引言 由於上一節文章內容過長，無法分享Azure Data Factory 的持續集成，持續發布。今天將着重介紹一下在使用 Azure DevOps Pipeline 發布，自動進行持續集成，並且已自動化發布，將Azure Data Factory 部署到多個環境中 ...
Azure Service Bus（一）入門簡介
一，引言 今天開始學習新的內容 Azure Service Bus（服務總線），其實也叫 ”雲消息服務“，和 RabbitMQ，KafKa的一樣都是作為消息通信服務，但是它們直接還有有很多區別的，我這里就不過多解釋了，大家可以自行了解。以下是我對Azure Service Bus的理解 ...
ADF 第一篇：Azure Data Factory介紹
Azure Data Factory 系列博客： ADF 第一篇：Azure Data Factory介紹 ADF 第二篇：使用UI創建數據工廠 ADF 第三篇：Integration runtime和 Linked Service ADF 第四篇：管道的執行和觸發器 ...
Azure Data Factory（四）集成 Logic App 的郵件通知提醒
一，引言 上一篇有介紹到使用Azure Data Factory 復制數據，然后有集成 Azure DevOps 實現CI/CD，但是對於真正的項目來說，這些肯定是不夠的，比如說在執行 Azure Pipeline 的過程中的監視，監視 Pipeline 的狀態，想通過郵件的方式接受監視信息 ...
Azure Data Factory（五）Blob Storage 密鑰管理問題
一，引言 之前講解的ADF 集成Azure DevOps 實現CI/CD，在 Releases Pipeline 階段，我們是將兩個 Blob Storage 的鏈接字符串復制、粘貼到 ”Override template parameters“，這樣雖然說實現了對應的功能，但是也暴露出一定 ...