一、楔子 胖子哥是我網名,叫了很多年的網名,網名的來歷與自己的滄桑和身材有關,不知是IT改變了我,顯得蒼老,還是我本就蒼老,順應了IT行業的需要。25歲那年,曾被跟我一樣高的漂亮美眉叫叔叔,從此再也不敢打小姑娘的注意,走上了重口味熱愛阿姨級別女性的不歸路;曾被三十五、六歲的同事阿姨說蒼老 ...
一 楔子 大數據傳統企業實施,其路漫漫,絕不會如曇花一現,探索大數據在傳統行業的實施之路,尋找一條適合傳統行業的企業大數據實施方法體系,是我執着堅守的信念,大數據是一種信仰,吾將上下而求索。記下項目中的點滴,算是日志,自勉。 二 項目背景 最近在處理一個商業銀行的大數據項目,旨在構建大數據資源池,項目邊界確認過程中,針對項目的定位出現了兩種不同的觀點,對大數據的在傳統行業的應用有了新的啟發。觀點一 ...
2014-02-12 07:45 7 3339 推薦指數:
一、楔子 胖子哥是我網名,叫了很多年的網名,網名的來歷與自己的滄桑和身材有關,不知是IT改變了我,顯得蒼老,還是我本就蒼老,順應了IT行業的需要。25歲那年,曾被跟我一樣高的漂亮美眉叫叔叔,從此再也不敢打小姑娘的注意,走上了重口味熱愛阿姨級別女性的不歸路;曾被三十五、六歲的同事阿姨說蒼老 ...
一、引言: 最近一直很忙,在做一個全國性項目的IT架構,所以一直沒有更新,好在算是告一段落,繼續努力吧。項目溝通中過程客戶反復在強調,大數據的安全性,言下之意,用了大數據,就不安全了,就有漏洞了。所以花了些時間,針對大數據的安全設計做了一個總結,算是階段性的成果吧,分享給大家。 二、安全架 ...
作者:原上野 標題: 大數據數據倉庫建設 鏈接:https://www.jianshu.com/p/83fa7b8c8e02 來源:簡書 一,數據倉庫的數據模型 1. 數據源 數據源,顧名思義就是數據的來源,互聯網公司的數據來源 ...
前言 數據倉庫是今年來適應利用數據支持決策分析的強烈需求而發展起來的數據庫應用技術,誠然,數據倉庫以數據庫為基礎,但是他在需求、客戶、體系結構與運行機制等方面與數據庫存在重大的不同,Kimball說:"我們花了二十年的時間往數據庫中加入數據,現在該是拿出來使用的時候了。" ---摘自 ...
1. 摘要 對於大數據而言,數據倉庫承載着整個企業的全業務的數據。早期數倉在關系型數據如Oracle,MySql上。到大數據時代,基於hadoop生態的大數據架構,數倉基本上都是基於hive的數倉。對於很多大數據開發者而言,特別是早期,很多開發者認為hive數倉就是和業務相關,隱射Hdfs ...
1、OLTP和OLAP OLTP的全稱是 Online Transaction Processing, OLTP主要用傳統的關系型數據庫來進行事務處理。OLTP最核心的需求是單條記錄的高效快速處理,索引技術、 分庫分表等最根本的訴求就是解決此問題 ...
1、什么是數據倉庫 數據倉庫,英文名稱為Data Warehouse,可簡寫為DW或DWH。數據倉庫,是為企業所有級別的決策制定過程,提供所有類型數據支持的戰略集合。它出於分析性報告和決策支持目的而創建。為需要業務智能的企業,提供指導業務流程改進、監視時間、成本、質量以及控制。 2、數據倉庫 ...
廣義上來說,Hadoop大數據平台也可以看做是新一代的數據倉庫系統, 它也具有很多現代數據倉庫的特征,也被企業所廣泛使用。因為MPP架構的可擴展性,基於MPP的數據倉庫系統有時候也被划分到大數據平台類產品。 但是數據倉庫和Hadoop平台還是有很多顯著的不同。針對不同的使用 ...