Azure Data Factory (1) ADF入門
《Windows Azure Platform 系列文章目錄》 我們在做數據分析和數據轉換的時候，經常會遇到ETL的場景，所謂ETL就是英文Extract-Transform-Load的縮寫，用來描述將數據從來源端經過抽取（extract）、轉換（transform）、加載 ...
原文：Azure Data Factory（二）復制數據
一，引言 上一篇主要只講了Azure Data Factory的一些主要概念，今天開始新的內容，我們開始通過Azure DevOps 或者 git 管理 Azure Data Factory 中的源代碼，同時創建 Pipleline 將 Azure Blob 的 Container 的數據通過 Copy Data 復制到 Azure Blob 的 Container中。我選擇的是Azure Dev ...
2020-11-02 16:51 9 1063 推薦指數：
相關推薦
Azure Data Factory（一）入門簡介
一，引言 今天分享一個新的Azure 服務-----Azure Data Factory（Azure 數據工廠），怎么理解，參考根據官方解釋-----數據工廠解釋：大數據需要可以啟用協調和操作過程以將這些巨大的原始數據存儲優化為可操作的業務見解的服務。 Azure 數據工廠是為這些復雜的混合 ...
Azure Data Factory (2) 通過ADF把SQL VM數據導出到Azure Storage Parquet文件
用Azure Data Factory，把SQL Server虛擬機的表，導入到Azure Storage ...
Azure Data Factory（三）集成 Azure Devops 實現CI/CD
一，引言 由於上一節文章內容過長，無法分享Azure Data Factory 的持續集成，持續發布。今天將着重介紹一下在使用 Azure DevOps Pipeline 發布，自動進行持續集成，並且已自動化發布，將Azure Data Factory 部署到多個環境中 ...
ADF 第一篇：Azure Data Factory介紹
Azure Data Factory 系列博客： ADF 第一篇：Azure Data Factory介紹 ADF 第二篇：使用UI創建數據工廠 ADF 第三篇：Integration runtime和 Linked Service ADF 第四篇：管道的執行和觸發器 ...
Azure Data Factory（四）集成 Logic App 的郵件通知提醒
一，引言 上一篇有介紹到使用Azure Data Factory 復制數據，然后有集成 Azure DevOps 實現CI/CD，但是對於真正的項目來說，這些肯定是不夠的，比如說在執行 Azure Pipeline 的過程中的監視，監視 Pipeline 的狀態，想通過郵件的方式接受監視信息 ...
Azure Data Factory（五）Blob Storage 密鑰管理問題
一，引言 之前講解的ADF 集成Azure DevOps 實現CI/CD，在 Releases Pipeline 階段，我們是將兩個 Blob Storage 的鏈接字符串復制、粘貼到 ”Override template parameters“，這樣雖然說實現了對應的功能，但是也暴露出一定 ...
SQL Azure(十) SQL Azure Data Sync數據同步功能(上)
首先舉個簡單的例子：如果某個大型生產企業包含有2個子系統： - 有一個《產品生產系統》放在企業內部部署，在企業內部辦公的員工(生產員工)都可以通過內網來訪問該系統。后台的數據庫是局域網內的SQL Server 2008 R2。 - 另外有一個《產品庫存系統》放在Windows ...