大数据2020-2021技术盘点与趋势
IEEE（电气电子工程师学会）发布了一项调研报告《IEEE全球CIO、CTO访问调研：2021年的机遇和挑战，以及关键的科技趋势》,据该调研结果显示：人工智能与机器学习、5G与物联网技术，将会成为2021年最重要的科技。人工智能的应用分为三层，所涵盖的企业非常多。现在这种发展速度也导致国内 ...
原文：2021~2022Apache大数据相关项目盘点
一 晋升为Apache TLP Top Level Project 的大数据相关项目 . Apache DataSketches . Apache Gobblin . Apache DolphinScheduler . Apache Pinot . Apache Hop 二 进入到 Apache 孵化器 incubator 的项目： . Apache Kyuubi . Apache SeaTunn ...
2022-03-06 15:40 0 2061 推荐指数：
相关推荐
大数据开源apache项目汇总
Pinot 是一个实时分布式的 OLAP 数据存储和分析系统。使用它实现低延迟可伸缩的实时分析。Pinot 从离线数据源(包括Hadoop和各类文件)和在线数据源(如Kafka)中攫取数据进行分析 ignite是分布式内存网格的一种实现,其基于java平台,具有可持久化,分布式 ...
推荐几个大数据相关的开源项目
kafka监控平台：https://github.com/smartloli/EFAK flink作业管理平台：https://github.com/zhp8341/flink-streaming-platform-web 数据可视化：https://github.com ...
大数据实战项目有哪些
目前大数据的就业情况，对我们大学生来说，重要的一道坎是什么？实战经验有木有？翻看各大招聘网站的应聘需求，都需要两到三年的开发经验。这个很重要，企业开出了高额的薪资，自然是想得到相应的回报。 我们大数据课程为就业课程，除了对大数据生态圈各个服务组件进行细致的讲解，还通过企业级真实大数据项目实战 ...
探花交友智能推荐社交项目-2021Java大数据实战
探花交友项目中使用Spring Boot+Dubbo+Spark+Spark MLlib实现了智能推荐的解决方案，通过交替最小二乘法的算法 实现了好友推荐、圈子推荐、小视频推荐等功能，并且对ALS算法做了优化，使其可以进行生产化..... 技术栈 前端：flutter ...
大数据相关组件介绍
HDFS: 用于存放一切信息的分布式的文件系统。大数据系统由于其涉及到的数据量较大所以往往需要仰赖于一个数据仓库系统，将所有的数据能够分门别类地存储起来，而HDFS就是这样一个仓库。需要注意一点，HDFS并不是我们通常实际用来查询或者处理数据的数据仓库组件，其更像是仓库本身，是一个偏硬件，偏 ...
大数据相关资料论文小结
前言 不知不觉，2020年已经过去一半了，最近突然反应过来自己也看了不少文献资料了，就想着把看过的文献和觉得比较好的书籍做一个总结，基本都是大数据分布式领域的，回顾自己学识的同时，也给想从事或这个领域的小伙伴一些参考 😃。最后顺便把接下来要看的东西列个列表，也会将自己学习的心得和经验分享 ...
apache 大数据平台搭建(hive)
一.官网下载安装包 https://hive.apache.org/ 由于hive-3.1.2默认支持的时spark2.4.3的版本,我们后面需要安装spark3.0.0 所以需要重新编译,可留言获取安装包 编译步骤：官网下载 Hive3.1.2 源码，修改 pom 文件中引用的 Spark ...