财迷们春节来这段时间,可能也不时在微信朋友圈里,看到有人发“加入3点钟无眠区块链学习成长群”的消息? 所以难怪,在近期的微信指数中,“区块链”不但力压“比特币”,甚至比“财富”还高,关 ...
什么叫大数据, 大 ,说的并不仅是数据的 多 不能用数据到了多少TB ,多少PB来说。 对于大数据,可以用四个词来表示:大量,多样,实时,不确定。 也就是数据的量庞大,数据的种类繁杂多样话,数据的变化飞快,数据的真假存疑。 大量:这个大家都知道,想百度,淘宝,腾讯,Facebook,Twitter等网站上的一些信息,这肯定算是大数据了,都要存储下来。 多样:数据的多样性,是说数据可能是结构型的数据 ...
2020-06-03 18:23 0 1732 推荐指数:
财迷们春节来这段时间,可能也不时在微信朋友圈里,看到有人发“加入3点钟无眠区块链学习成长群”的消息? 所以难怪,在近期的微信指数中,“区块链”不但力压“比特币”,甚至比“财富”还高,关 ...
正确认识和使用鲁班尺 张长青 鲁班尺,中国古代风水工具。也称鲁般尺、鲁般真尺、门公尺、门光尺、八字尺等,相传为我国春秋时期鲁班发明。 鲁班,姓公输,名般,又称公输子、公输盘、班输、鲁般。 “般”和“班”同音,古时通用,故人们常称他为鲁班。鲁班 ...
由于篇幅较大,废话不多说,直奔主题。 hadoop 安装同样可分为 单机模式、伪分布式、完全分布式 本文主要介绍完全分布式,环境 centos 6.5,hadoop-2.6.5 第一步:配置好 4 台虚拟机或者物理机,具体步骤参考我的其他博客 第二步:查看主机名,并修改 ...
已经不止是一个人讲到C语言在如今变幻莫测的编程领域过时了,还在十几年前大学的老师说过一句非常经典的话,现在想起来倒也不觉得过时。 学好C语言一定能找到工作!!! 这句话放在今天来看依然觉 ...
step1 input InputFormat读取数据,将数据转换成<key ,value>对,设置FileInputFormat,默认是文本格式(TextInputForma ...
1.概述 其实,在从事过调优相关的工作后,会发现其实调优是一项较为复杂的工作。而对于Hadoop这样复杂且庞大的系统来说,调优更是一项巨大的工作,由于Hadoop包含Common、HDFS、MapReduce、YARN等模块,每个模块都有可以根据自身业务进行优化的工作,本篇博客也是针对 ...
0x00 实验环境 攻击机:Win 10 靶机也可作为攻击机:Ubuntu18 (docker搭建的vulhub靶场) 0x01 影响版本 hadoop 3.3.0以下 vulhub版本为2.8.1: 0x02 漏洞复现 ...
1. 内存 hadoop为各个守护进程(namenode,secondarynamenode,jobtracker,datanode,tasktracker)统一分配的内存在hadoop-env.sh中设置,参数为HADOOP_HEAPSIZE,默认为1000M。 大部分情况下,这个统一设置 ...