Spark2 Dataset統計指標：mean均值，variance方差，stddev標准差，corr(Pearson相關系數)，skewness偏度，kurtosis峰度

本文轉載自查看原文 2016-11-25 17:55 5020 4.2--MySQL/ 4.1--Oracle/ 4.3--SQL Server/ 2.0--Spark/ 2.3--Hive

val df4=spark.sql("SELECT mean(age),variance(age),stddev(age),corr(age,yearsmarried),skewness(age),kurtosis(age) FROM Affairs")

df4.show
+--------+------------------+------------------+-----------------------+-----------------+--------------------+
|avg(age)|     var_samp(age)|  stddev_samp(age)|corr(age, yearsmarried)|    skewness(age)|       kurtosis(age)|
+--------+------------------+------------------+-----------------------+-----------------+--------------------+
|    34.0|173.33333333333334|13.165611772087667|     0.7456766124552038|0.965388004190285|-0.43417159763313595|
+--------+------------------+------------------+-----------------------+-----------------+--------------------+

免責聲明！

本站轉載的文章為個人學習借鑒使用，本站對版權不負任何法律責任。如果侵犯了您的隱私權益，請聯系本站郵箱yoyou2525@163.com刪除。

猜您在找 區別 |峰度（Kurtosis）和偏度（Skewness） matlab求峰度(kurtosis）、偏度(skewness)得函數及python對應的峰度(kurtosis）、偏度(skewness)函數平均值(Mean)、方差(Variance)、標准差(Standard Deviation) （轉）平均值(Mean)、方差(Variance)、標准差(Standard Deviation) 區別 R語言實現計算兩個向量的協方差、標准差、皮爾遜相關系數 R語言中計算最大值、最小值、平均數、中位數、方差、標准差、協方差、相關系數 4 series、Dataframe基本信息描述及統計（維度、形狀、均值、求和、協方差、相關系數、排名） numpy 計算均值、方差、標准差協方差與相關系數 Pearson相關系數和Spearman相關系數的區別