原文:DataHub使用小結(一)——概述

一 概念 .什么是DataHub DataHub是流式數據 Streaming Data 的處理平台,提供對流式數據的發布 Publish ,訂閱 Subscribe 和分發功能 在訂閱 發布功能中,訂閱者訂閱自己感興趣的數據,發布者發布到中間channel,發布 訂閱彼此不知道對方的存在 可以輕松構建基於流式數據的分析和應用。 主要可以進行流處理應用以及流數據歸檔 歸檔到maxcomputer ...

2018-09-06 17:11 0 7877 推薦指數:

查看詳情

DataWorks使用小結(一)——概述

一、概述   DataWorks數據工場,是MaxComputer的可視化開發平台,一站式開發、管理界面   1.功能概述     1.強大調度:支持分鍾到月的調度     2.多種任務:支持ODPS、SHELL等多種任務     3.可視化開發:B/S架構的可視化開發界面,簡單易上手 ...

Sun Aug 26 20:00:00 CST 2018 0 13950
DataHub

DataHub 為數據分析提供了類似github的托管功能,並且讓大家在線運行Ipython notebook,共享數據分析代碼,從零開始學習數據分析的方法。DataHub 集數據收集管理,數據版本 http://datahub.top/ 數據分析基礎:http://datahub ...

Wed Jul 15 20:02:00 CST 2015 0 3697
DataHub開源元數據管理工具搭建及使用

一、DataHub安裝   1、安裝docker和docker-compose     yum -y install docker     curl -L "https://github.com/docker/compose/releases/download/1.29.2 ...

Tue Feb 15 19:55:00 CST 2022 0 4121
LinkedIn-DataHub專題: 初識DataHub

本文僅從普及角度讓大家對元數據中心系統及其DataHub有個初步了解。DataHub部署、實戰、更深入的技術剖析會單獨給出 介紹 DataHub是由LinkedIn的數據團隊開源的一款提供元數據搜索與發現的工具,在數據資產越來越重視的當下,探索數據治理解決方案,以滿足不斷增長的大數據 ...

Wed Feb 24 04:42:00 CST 2021 0 387
elasticsearch使用小結(ES使用小結

本文章總結自己在使用es過程中遇到的一些場景與解決辦法。 1.查詢結果排序   使用es進程query時,默認是按照_score排序的,當score同分時,同分結果順序就不確定了(可能是按更新時間排序),如果要進行二次排序,就要用到sort功能了,話不多說,上代 ...

Fri Sep 29 18:15:00 CST 2017 0 4353
Wireshark的簡單使用小結

Wireshark(前稱Ethereal)是一個網絡封包分析軟件。網絡封包分析軟件的功能是截取網絡封包,並盡可能顯示出最為詳細的網絡封包資料。在過去,網絡封包分析軟件是非常昂貴,或是專門屬於營利用的軟件,Wireshark的出現改變了這一切。在GNU GPL通用許可證的保障范圍底下,使用 ...

Mon Feb 27 01:33:00 CST 2012 2 4437
GD庫使用小結---1

  因為一開始,“大家”都說一般任務中,用php操作圖片不常見,像我們這種基本業務型的,就更用不到了,所以先別看,偶就沒有看。現在有機會了自然要來玩一把。   以前學過C#的GDI+,交了課程設計后 ...

Sun Apr 19 08:40:00 CST 2015 2 2406
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM