1、hdfs-site.xml 参数配置 – dfs.name.dir – NameNode 元数据存放位置 – 默认值：使用core-site.xml中的hadoop.tmp.dir/dfs/name – dfs.block.size – 对于新文件切分的大小，单位byte ...

网易有道笔记负责人 蒋炜航谈敏捷开发的实战经验：什么时候适合使用“敏捷开发”呢？我们的经验是需要两点：一、团队有三名或以上的研发工程师；二、团队内有一名合适的Scrum Master。 　　有道云笔记团队成立于从2010年，从成立伊始我们就一直积极地在实践中尝试Scrum(敏捷 ...

一.项目的编码设置 目的：避免出现莫名其妙错误，笔者曾经就碰到因编码不对返回null而浪费大量时间；统一的编码可以减少解析的时间，提高效率 1.1修改my.ini文件 一般在C:\Progra ...

本文来自去年整理发布的“十天掌握MongoDB”系列PPT。该系列PPT的内容则来自当时的《MongoDB权威指南（英文版）》，个人翻译能力有限，不能保证PPT的内容完全符合该书的内容。而且，我还加入 ...

　　　　　　　　　　CDH构建大数据平台-集群配置优化实战之HDFS集群调优 　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　　作者：尹正杰 版权声明：原创作品，谢绝转载！否则将追究法律责任。 一.hdfs ...

前言 最近在忙一个高考项目，看着系统顺利完成了这次高考，终于可以松口气了。看到那些即将参加高考的学生，也想起当年高三的自己。 下面分享下RabbitMQ实战经验，希望对大家有所帮助： 一、生产消息 关于RabbitMQ的基础使用，这里不再介绍了，项目 ...

HDFS适合做： 存储大文件。上G、T甚至P。 一次写入，多次读取。并且每次作业都要读取大部分的数据。 搭建在普通商业机群上就可以了。虽然会经常宕机，但HDFS有良好的容错机制。 HDFS不适合做： 实时数据获取。如果有这个需求可以用HBase。 很多小文件 ...

HDFS是什么：HDFS即Hadoop分布式文件系统（Hadoop Distributed Filesystem），以流式数据访问模式来存储超大文件，运行于商用硬件集群上，是管理网络中跨多台计算机存储的文件系统。 HDFS不适合用在：要求低时间延迟数据访问的应用，存储大量的小文件，多用户写入 ...