原文:七牛雲大數據平台建設實踐

年 月 日,為期 天的 ECUG Con 十周年大會在深圳圓滿結束,會上七牛雲 CEO許式偉做了題為 七牛大數據平台建設實踐 的演講,首次披露七牛雲在大數據方向的產品思路,以下是對他本次的演講實錄。 許式偉 七牛雲創始人 CEO 從連接到智能 我們都說現在是移動互聯網時代,移動互聯網時代我們隨時隨地能夠上網,面向連接的革命誕生了很多有意思的應用,包括滴滴打車 外賣,這些都是在連接的時效性基礎上做 ...

2017-02-16 11:10 0 1489 推薦指數:

查看詳情

關於智慧大數據中心平台建設思路

一,設計目標 以ES為核心建立數據集中處理平台,支持從各個應收系統采集數據,進行清洗與轉換,之后可以進行聚合操作,對外提供API查詢; 全平台支持數據集自建,支持轉換,查詢規則自由配置。 二,設計需求 1.系統支持自由建立數據集,每個數據集對應一個ES的一個索引的別名 ...

Mon Aug 27 16:45:00 CST 2018 0 1660
[平台建設] 大數據平台如何實現任務日志采集

背景 平台任務主要分3種: flink實時任務, spark任務,還有java任務,spark、flink 我們是運行在yarn 上, 日常排錯我們通過查看yarn logs來定位, 但是會對日志存儲設置一定的保留時間, 為了后續更好排查問題,希望能夠將spark、flink、java任務都收集 ...

Thu Dec 30 08:07:00 CST 2021 0 732
大數據數據倉庫建設

作者:原上野 標題: 大數據數據倉庫建設 鏈接:https://www.jianshu.com/p/83fa7b8c8e02 來源:簡書 一,數據倉庫的數據模型 1. 數據數據源,顧名思義就是數據的來源,互聯網公司的數據來源 ...

Thu Apr 30 02:00:00 CST 2020 0 792
美團大數據平台架構實踐

http://blog.51cto.com/jackwxh/1899802 今天給大家介紹的內容主要包括以下四個部分首先是介紹一下美團大數據平台的架構,然后回顧一下歷史,看整個平台演進的時間演進線,每一步是怎么做的,以及一些挑戰和應對策略,最后總結一下,聊一聊我對平台化的看法。 謝語宸 ...

Fri May 11 21:01:00 CST 2018 0 5191
大數據多維分析平台實踐

大數據多維分析平台實踐 一、 大數據多維分析平台搭建的初心 隨着公司業務量的增長,基於傳統關系型數據庫搭建的各種報表查詢分析系統,性能下降明顯。同時由於大數據平台的的日趨完善,實時的核心業務數據逐步進入大數據平台數據進入了大數據平台,相伴而來的是各種業務需求,這里主要聚焦在如何高效穩定 ...

Mon Jun 24 05:35:00 CST 2019 0 1028
時間序列大數據平台建設(Time Series Data,簡稱TSD)

來源:https://blog.csdn.net/bluishglc/article/details/79277455 引言在大數據的生態系統里,時間序列數據(Time Series Data,簡稱TSD)是很常見也是所占比例最大的一類數據,幾乎出現在科學和工程的各個領域,一些常見的時間序列 ...

Sun Oct 28 18:22:00 CST 2018 0 1045
基於原生的大數據實時分析方案實踐

1 方案介紹 大數據處理技術現今已廣泛應用於各個行業,為業務解決海量存儲和海量分析的需求。但數據量的爆發式增長,對數據處理能力提出了更大的挑戰,同時對時效性也提出了更高的要求。實時分析已成為企業大數據分析中最關鍵的術語,這意味企業可將所有數據用於大數據實時分析,實現在數據接受同時即刻為企業生成 ...

Wed Dec 02 01:45:00 CST 2020 0 890
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM