原文:Spark項目之電商用戶行為分析大數據平台之(十一)JSON及FASTJSON

一 概述 JSON的全稱是 JavaScriptObject Notation ,意思是JavaScript對象表示法,它是一種基於文本,獨立於語言的輕量級數據交換格式。XML也是一種數據交換格式,為什么沒 有選擇XML呢 因為XML雖然可以作為跨平台的數據交換格式,但是在JS JavaScript的簡寫 中處理XML非常不方便,同時XML標記比數據 多,增加了交換產生的流量,而JSON沒有附加的 ...

2018-05-23 18:58 0 3329 推薦指數:

查看詳情

Spark項目商用戶行為分析大數據平台之(一)項目介紹

一、項目概述 本項目主要用於互聯網商企業中,使用Spark技術開發的大數據統計分析平台,對商網站的各種用戶行為(訪問行為、購物行為、廣告點擊行為等)進行復雜的分析。用統計分析出來的數據,輔助公司中的PM(產品經理)、數據分析師以及管理人員分析現有產品的情況,並根據用戶行為分析結果持續改進產品 ...

Mon May 21 17:20:00 CST 2018 0 9873
Spark項目商用戶行為分析大數據平台之(九)表的設計

一、概述 數據設計,往往包含兩個環節: 第一個:就是我們的上游數據,就是數據調研環節看到的項目基於的基礎數據,是否要針對其開發一些Hive ETL,對數據進行進一步的處理和轉換,從而讓我們能夠更加方便的和快速的去計算和執行spark作業; 第二個:就是要設計spark作業要保存結果數據的業務 ...

Mon May 21 17:42:00 CST 2018 0 3136
Spark項目商用戶行為分析大數據平台之(六)用戶訪問session分析模塊介紹

一、對用戶訪問session進行分析 1、可以根據使用者指定的某些條件,篩選出指定的一些用戶(有特定年齡、職業、城市); 2、對這些用戶在指定日期范圍內發起的session,進行聚合統計,比如,統計出訪問時長在0~3s的session占總session數量的比例; 3、按時間比例,比如一 ...

Mon May 21 17:27:00 CST 2018 2 5350
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM