经常有人问,我想学习开发,到底是学Java好还是学大数据好?或者是,学习大数据还有必要学Java吗? 依我说,这个提问的标准答案是:两者都学。 先来甩两张图。 一张是腾讯的大数据开发工程师的JD, 还有一张是我随意找的某个猎头职位 ...
关于Java Java就是一门编程语言。实现同一个需求有上百种编程语言可以完成,Java之于大数据就是一种工具罢了。 关于大数据 大数据就是一个行业,实现同一个需求同样有多种工具可以选择,狭义一点以技术的角度讲,各类框架有Hadoop,spark,storm,flink等,就这类技术生态圈来讲,还有各种中间件如flume,kafka,sqoop等等 ,这些框架以及工具大多数是用Java编写而成, ...
2017-08-10 14:16 0 2671 推荐指数:
经常有人问,我想学习开发,到底是学Java好还是学大数据好?或者是,学习大数据还有必要学Java吗? 依我说,这个提问的标准答案是:两者都学。 先来甩两张图。 一张是腾讯的大数据开发工程师的JD, 还有一张是我随意找的某个猎头职位 ...
1. 统计学 统计学可以分为:描述统计学与推断统计学 描述统计学:使用特定的数字或图表来体现数据的集中程度和离散程度。例:每次考试算的平均分,最高分,各个分段的人数分布等,也是属于描述统计学的范围。 推断统计学:根据样本数据推断总体数据特征。例:产品质量检查,一般采用抽检,根据所抽样本的质量 ...
最近公司在做一个大数据项目的时候,数据量达到了1000w+的程度,并且还有源源不断的数据从采集上来,并需要和数据库中的数据做一系列的逻辑比对,在此就自己的实践总结下心得,欢迎批评指正。 需求:将MySQL表中的部分数据(状态为1)的数据和采集上来的新数据(状态为2)的数据根据已经设置好 ...
Java: 1、从各行业软件开发技术的生态圈来看: (1)Java已经形成一种文化,有企业成熟的解决方案 (2)开源社区发展的强大,而Java在开源社设区占重要地位 (3)主流大数据框架hadoop、spark、HBase等离不开Java平台 2、从Java本身特性来看 (1)面向对象 ...
当你迈入大数据的领域,首先必要接受的是大数据开发的洗礼,编程语言作为大数据的基础方向是你入门的突破口,一定要仔细学习。在这里很多同学都会有一个疑问:编程语言那么多,我需要学习哪一门编程语言呢?看到很多人都选择学习Java,Java和大数据的关系是怎样的? 诚然,很多Java程序员都纷纷转型大数据 ...
大数据必备 关于大数据基础知识,以前浪尖写过一篇文章,也多次在 知识星球里分享过经验。 具体学习内容,可以参看如下文章: 入门大数据必读 这个可以看到做大数据的话java是必需品,因为基本所有的大数据框架都是jvm开发,或者精确一点都是java或者scala。 况且想做一个牛x的大数据 ...
随着2017年大数据各种应用的发展,大数据的价值得以充分的发挥,大数据已在企业、社会各个层面都成为重要的手段,数据已成为新的企业战略制高点,也是各个企业争夺的新焦点。那么我们一直在说着的大数据究竟是什么呢?为什么提到大数据的时候会经常提到Java,Java与大数据究竟有什么关系 ...
身处大数据圈近5年了,在我的概念里一直认为大数据最牛的两个东西是Hadoop和Spark。18年下半年的时候,我突然发现身边很多大数据牛人都是研究学习Flink,甚至连Spark都大有被冷落抛弃的感觉。何以至此,Flink是个什么鬼? Apache Flink(简称Flink)是一个分布式 ...