Spark-2.3.2【SparkStreaming+SparkSQL-實時儀表盤應用】
應用場景:實時儀表盤(即大屏),每個集團下有多個mall,每個mall下包含多家shop,需實時計算集團下各mall及其shop的實時銷售分析(區域、業態、店鋪TOP、總銷售額等指標)並提供可視化展現,之前時候一直在Strom實現,現在改為Spark2.3.2實現。 1、數據源 ...
應用場景:實時儀表盤(即大屏),每個集團下有多個mall,每個mall下包含多家shop,需實時計算集團下各mall及其shop的實時銷售分析(區域、業態、店鋪TOP、總銷售額等指標)並提供可視化展現,之前時候一直在Strom實現,現在改為Spark2.3.2實現。 1、數據源 ...
由於SparkSQL不支持HBase的數據源(HBase-1.1.2),網上有很多是采用Hortonworks的SHC,而SparkSQL操作HBase自定義數據源大多數都是基於Scala實現,我就自 ...