1、hdfs-site.xml 參數配置 – dfs.name.dir – NameNode 元數據存放位置 – 默認值：使用core-site.xml中的hadoop.tmp.dir/dfs/name – dfs.block.size – 對於新文件切分的大小，單位byte ...

網易有道筆記負責人 蔣煒航談敏捷開發的實戰經驗：什么時候適合使用“敏捷開發”呢？我們的經驗是需要兩點：一、團隊有三名或以上的研發工程師；二、團隊內有一名合適的Scrum Master。 　　有道雲筆記團隊成立於從2010年，從成立伊始我們就一直積極地在實踐中嘗試Scrum(敏捷 ...

一.項目的編碼設置 目的：避免出現莫名其妙錯誤，筆者曾經就碰到因編碼不對返回null而浪費大量時間；統一的編碼可以減少解析的時間，提高效率 1.1修改my.ini文件 一般在C:\Progra ...

本文來自去年整理發布的“十天掌握MongoDB”系列PPT。該系列PPT的內容則來自當時的《MongoDB權威指南（英文版）》，個人翻譯能力有限，不能保證PPT的內容完全符合該書的內容。而且，我還加入 ...

　　　　　　　　　　CDH構建大數據平台-集群配置優化實戰之HDFS集群調優 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正傑 版權聲明：原創作品，謝絕轉載！否則將追究法律責任。 一.hdfs ...

前言 最近在忙一個高考項目，看着系統順利完成了這次高考，終於可以松口氣了。看到那些即將參加高考的學生，也想起當年高三的自己。 下面分享下RabbitMQ實戰經驗，希望對大家有所幫助： 一、生產消息 關於RabbitMQ的基礎使用，這里不再介紹了，項目 ...

HDFS適合做： 存儲大文件。上G、T甚至P。 一次寫入，多次讀取。並且每次作業都要讀取大部分的數據。 搭建在普通商業機群上就可以了。雖然會經常宕機，但HDFS有良好的容錯機制。 HDFS不適合做： 實時數據獲取。如果有這個需求可以用HBase。 很多小文件 ...

HDFS是什么：HDFS即Hadoop分布式文件系統（Hadoop Distributed Filesystem），以流式數據訪問模式來存儲超大文件，運行於商用硬件集群上，是管理網絡中跨多台計算機存儲的文件系統。 HDFS不適合用在：要求低時間延遲數據訪問的應用，存儲大量的小文件，多用戶寫入 ...