最近正在進行ETL后台系統數據的日志分析,查看運行耗時長的TASK,並找出耗時長的JOB,進行邏輯層面和數據庫層面的優化.本文僅從數據庫層面上的優化着手(包括SQL語句的調整以及greenplum table dk的調整).查看一個耗時30分鍾左右的JOB,找到相應的源表,進行如下分析 ...

以下內容摘自：公眾號- SPSS生活統計學 保存做復習之用。 峰度（Kurtosis） 峰度是描述總體（樣本）中所有取值分布形態陡緩程度的統計量。通過計算可以得到峰度系數，峰度系數與分布形態的關系是： 峰度系數=3，扁平程度適中； 峰度系數<3，為扁平分布； 峰度系數> ...

最近看資料時總是會看到箱形圖， 上大學時候曾經學過這個東西，不過這么多年也都忘記差不多了，正好借這機會再次學習學習。 箱型圖： 主要包含六個數據節點，將一組數據從大到小排列，分別計算出他的上邊緣，上四分位數Q3，中位數，下四分位數Q1，下邊緣，還有一個異常 ...

在 Doris 中，數據都以表（Table）的形式進行邏輯上的描述 名詞解釋 數據分布：數據分布是將數據划分為子集, 按一定規則, 均衡地分布在不同節點上，以期最大限度地利用集群的並發性能 短查詢：short-scan query，指掃描數據量不大，單機就能完成掃描的查詢 長查詢 ...

1、讀取數據 2、查看數據基本特征 3、繪制圖形 在直方圖的基礎上畫一個真正的正態分布的圖與繪制QQ圖 5、檢驗是否符合正態 　　這個正態分布的假設檢驗的零假設當然就是分布是正態分布的。結果我們發現，p-value很大，所以我 ...

更詳細的資料請看課程的課程資料哦！ 數據分析的三大類型： 探索型：簡單點說就是畫圖 驗證型 預測型 探索型：數據收集—>數據處理—>數據清理 數據處理和數據清理是通過探索型的圖表來進行相互對照，可以進行多次的 探索型數據分析作用： 通過探索型 ...

1.離解數據與離散分布 離解數據通常是那些只能用整數表現的數據。比如某省的人口數，宇宙中單位體積內的星球個數等。 1.1統計中常見的描述離散型數據的離散分布： 1.退化分布：一個隨機變量X以概率1取某一常數，即 P{X ...

1.什么是峰度與偏度？ 峰度(kurtosis)是描述分布形態的陡緩程度。表征概率密度函數分布曲線在平均值處峰值高低的特征數。用bk表示。直觀看來，峰度反映了數據尾部 厚度。 在相同的標准差下，峰度系數越大，分布就有更多的極端值，那么其余值必然要更加集中在眾數周圍，其分布必然 ...