配置历史服务器 1、在mapred-site.xml中写入一下配置 2、查看启动历史服务器文件目录 　　在Hadoop安装目录中的sbin中有mr-jobhistory-daemon.sh命令 3、启动历史服务器 　　mr-jobhistory-daemon.sh ...

这段时间在做大数据方面的开发，使用Hadoop、HBase、Spark、Spart Streaming、Kafka、Docker、Kubernetes等等平台与组件，在服务器运维方面也在模仿着别人重复造轮子。要基于这些系统进行开发，就必须搭建一套稳定的服务器环境，虽然网上有大量的文章与教程，但在 ...

业余菜鸟第一次使用云服务器搭建大数据集群，下面是所有步骤 微信扫码关注公众号，有意想不到的惊喜哦！！！ ...

一、NTP 配置时间服务器1.1、检查当前系统时区1.2、同步时间1.3、检查软件包1.4、修改 ntp 配置文件1.5、重启 ntp 服务1.6、设置定时同步任务二、Linux 集群服务群起脚本2.1、介绍2.2、编写脚本三、CentOS6.8 升级到 python 到 2.73.1、环境 ...

一、质疑分层不合理 云上大数据数仓解决方案：https://www.aliyun.com/solution/datavexpo/datawarehouse 1、离线数仓--基于hive 2、实时数仓--基于kafka中间件 每一步都会缓存至datahub 二、数仓概念 ...

说明：大数据时代，传统运维向大数据运维升级换代很常见，也是个不错的机会。如果想系统学习大数据运维，个人比较推荐通信巨头运维大咖的分享课： https://url.cn/5HIqOOr，主要是实战强、含金量高、专注度高，有6个专题+2个大型项目+腾讯云服务器，真枪实弹传授上千大数据集群运维经验 ...

一.为什么要大数据学习？ 这是一个大数据的时代，一个企业只有掌握了大数据才能把握住市场的命脉，一个人掌握了大数据就可以比较轻松的向机器学习、人工智能等方向发展。所以我们有必要去掌握大数据的技术同时也关注大数据的发展趋势，不能裹足不前。 二.关于本专题的学习 作为一个普通本科大学生，在校 ...

目录 云硬盘基础 瞻仰云硬盘 创建文件系统 硬盘相关常见命令 bt下载和复用数据 transmission安装和配置方法 尝试使用 配置下载目的地 总结和问答练习 时效性 ...