Presto在大數據領域的實踐和探索
作為Presto小白時期，經過調研、線上調試、生產環境穩定運行這個過程中大量的實踐經驗和資料檢索，沉淀下來的一個讀 ...
原文：Presto在滴滴的探索與實踐
桔妹導讀：Presto在滴滴內部發展三年，已經成為滴滴內部Ad Hoc和Hive SQL加速的首選引擎。目前服務 K 用戶，每天讀取 PB PB HDFS數據，處理 萬億 萬億條記錄，為了承接業務及豐富使用場景，滴滴Presto需要解決穩定性 易用性 性能 成本等諸多問題。我們在 年多的時間里，做了大量優化和二次開發，積攢了非常豐富的經驗。本文分享了滴滴對Presto引擎的改進和優化，同時也提供 ...
2020-10-16 12:00 0 786 推薦指數：
相關推薦
滴滴七層接入平台實踐和探索
桔妹導讀：滴滴七層接入平台負責滴滴全公司http東西向和南北向流量的接入，其請求峰值qps數百萬，日請求量數千億，接入域名數千個、接入服務數千個、轉發規則數萬個，其穩定高效的運行對於保障滴滴業務至關重要。本文將主要介紹七層接入平台在服務治理和穩定性建設上的實踐，同時也分享其在雲原生領域一些 ...
機器學習在滴滴網絡定位中的探索和實踐
桔妹導讀：定位是所有LBS服務的基礎服務。在滴滴的業務場景下，定位主要是指各類終端設備的位置，包括手機、單車、行車記錄儀、車機端等。作為底層服務，在滴滴日均提供700億次定位服務，支撐着平台的各類業務。 今天給大家分享的是機器學習在滴滴網絡定位中的實踐工作，會重點介紹三階段的演進：無 ...
AIOps 在騰訊的探索和實踐
歡迎大家前往騰訊雲+社區，獲取更多騰訊海量技術實踐干貨哦~ 本文由LemonLu發表於雲+社區專欄 趙建春 騰訊 技術運營通道主席 騰訊 社交網絡運營部助理總經理 AIOps 白皮書核心編寫專家 我今天要講的主題，AIOps，是一個比較新的話題，其實從概念的提出到我們做 ...
epoll模型的探索與實踐
epoll是什么呢?,epoll是IO模型中的一種,屬於多路復用IO模型; 到這里你應該想到了,select,的確select也是一種多路復用的IO模型,但是其單個select最多只能同時處理102 ...
近實時運算的利器---presto在公司實踐
1.起因 公司hadoop集群里的datanonde和tasktracker節點負載主要集中於晚上到凌晨，平日工作時間負載不是很高。但在工作時間內，公司業務人員有實時查詢需求，現在主要 借助於hi ...
實時數倉在滴滴的實踐和落地
桔妹導讀：隨着滴滴業務的高速發展，業務對於數據時效性的需求越來越高，而伴隨着實時技術的不斷發展和成熟，滴滴也對實時建設做了大量的嘗試和實踐。本文主要以順風車這個業務為引子，從引擎側、平台側和業務側各個不同方面，來闡述滴滴所做的工作，分享在建設過程中的經驗。 1. 實時數倉建設目的 ...
信息公交服務在滴滴的應用實踐
桔妹導讀：IT技術的不斷更新推動着公共交通的概念不斷在深度和廣度上擴展。深度上，精准的公交ETA和實時到站等信息可以幫助用戶更好的規划行程時間；廣度上，配合單車，網約車等共享出行方式可以幫助 ...