本文分享在Azure Databricks中如何實現行轉列和列轉行，並介紹對查詢的結果進行排序的各種方式。 一，行轉列 在分組中，把每個分組中的某一列的數據連接在一起： collect_l ...

Azure Databricks是一個可擴展的數據分析平台，基於Apache Spark。Azure Databricks 工作區（Workspace）是一個交互式的環境，工作區把對象（noteboo ...

對數據分析時，通常需要對數據進行分組，並對每個分組進行聚合運算。在一定意義上，窗口也是一種分組統計的方法。 分組數據 DataFrame.groupBy()返回的是GroupedData類，可以對 ...

Spark SQL 支持多種數據類型，並兼容Python、Scala等語言的數據類型。 一，標識符 標識符是一個字符串，用於標識一個數據庫對象，比如table、view、schema、column ...

Databricks 文件系統 (DBFS，Databricks File System) 是一個裝載到 Azure Databricks 工作區的分布式文件系統，可以在 Azure Databric ...

Azure Key Vault（密鑰庫）是用於安全地存儲和訪問Secret的雲服務，Secret是需要嚴格控制訪問權限的內容，例如API密鑰，密碼，證書或加密密鑰。Key Vault Service支 ...

Spark SQL 表的命名方式是db_name.table_name，只有數據庫名稱和數據表名稱。如果沒有指定db_name而直接引用table_name，實際上是引用default 數據庫下的表。 ...

Databricks Runtime 包含Azure SQL 數據庫的 JDBC 驅動程序，本文介紹如何使用數據幀 API 連接到使用 JDBC 的 SQL 數據庫，通過 JDBC 接口進行的讀取操作 ...

pyspark中的DataFrame等價於Spark SQL中的一個關系表。在pyspark中，DataFrame由Column和Row構成。 pyspark.sql.SparkSession ...

DBFS使用dbutils實現存儲服務的裝載（mount、掛載），用戶可以把Azure Data Lake Storage Gen2和Azure Blob Storage 賬戶裝載到DBFS中。Mou ...