原文:大數據開發工程師面試《一》Shopee蝦皮技術面

一 項目問題 做了哪些項目 使用什么技術 哪個是你主導的項目,一共開發多少個接口,項目多長時間,數據庫有多少個表 二 技術問題 用自己擅長的語言實現非遞歸單鏈表反轉 現場手寫 Hadoop和spark的主要區別 Hadoop中一個大文件進行排序,如何保證整體有序 sort只會保證單個節點的數據有序 Hive中有哪些udf Hadoop中文件put get的過程詳細描述 Java中有哪些GC算法 J ...

2019-06-17 20:05 0 1050 推薦指數:

查看詳情

大數據開發工程師面試——Sqoop、Canal、Maxwell

sqoop主要用來做離線任務,每天定時執行腳本。 canal和maxwell主要用來做實時任務或拉鏈表,實時監控表的變化。 Sqoop 項目經驗 Hive中的Null在底層是以“\N”來存儲,而MySQL中的Null在底層就是Null,為了保證數據兩端的一致性。在導出數據時采用 ...

Wed Jan 06 02:59:00 CST 2021 0 374
大數據開發工程師必看書籍

書籍是技術學習的源泉,也是很多程序員學習的重要工具。對於大數據的學習,除了要配合全新的大數據技術視頻教程之外,我們還要看一下相關的書籍,更容易讓我們深入了解學習大數據技術大數據學習相關書籍推薦閱讀: 1、 《數據之巔 ...

Wed Jan 02 19:55:00 CST 2019 0 867
接地氣,到底什么才是大數據開發工程師

最近發現有些同學並不太了解大數據開發工程師這個職位,自己轉大數據開發也已經三年了,所以想簡單介紹一下什么是大數據開發工程師,當前互聯網公司的數據開發到底是什么樣子的?和一般的java或者php工程師在工作上有什么區別? 聲明:本文僅代表個人觀點,有不同意見歡迎提出。另外本文對大數據開發工程師沒什么 ...

Wed Sep 26 17:29:00 CST 2018 8 1722
數據倉庫工程師大數據開發工程師的區別

  機緣巧合從Java開發轉行成為數倉工程師,工作半年后,又成為大數據開發工程師。趁現在有時間,分享一下轉行經驗以及大數據的一些基礎介紹,希望能幫到初入大數據的兄弟們,畢竟我當初入門的時候,也是一頭亂麻。   首先對於大數據轉行或者學習,比較好入門的崗位就是數倉開發工程師大數據開發工程師這兩個 ...

Tue Apr 12 03:22:00 CST 2022 1 2411
做了五年大數據開發工程師總結的的大數據學習路線

先扯一下大數據的4V特征: 數據量大,TB->PB 數據類型繁多,結構化、非結構化文本、日志、視頻、圖片、地理位置等; 商業價值高,但是這種價值需要在海量數據之上,通過數據分析與機器學習更快速的挖掘出來; 處理時效性高,海量數據的處理需求不再局限在離線計算當中。 現如今,正式 ...

Tue Jan 22 17:22:00 CST 2019 0 1376
Java后端開發工程師是否該轉大數據開發

撰寫我對java后端開發工程師選擇方向的想法,寫給在java后端選擇轉方向的人 背景 看到一些java開發工程師,對java后端薪酬太悲觀了。認為換去大數據領域就會高工資。覺得java后端沒有前途。我從事java后端開發,對大數據領域工作有些了解,但不深入。本文描述一下我對java后端和是否轉 ...

Fri Jan 10 20:48:00 CST 2020 1 1685
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM