sparkSQL原理和使用——一般在生产中，基本都是使用hive做数据仓库存储数据，然后用spark从hive读取数据进行处理
一、spark SQL概述 1.1 什么是spark SQL Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个编程抽象叫做DataFrame并且作为分 ...
原文：mqtt 在生产中的配置使用实例
https: www.cnblogs.com qianxiaoruofeng p .html 消息队列是计算机中不可或缺的一个重要角色，用好mq 能给我们的工作减少更多的工作量，提高办公的效率。 什么是mqtt ，先了解一下。 https: mqtt.org https: www.emqx.com zh 下载服务端程序 和客户端的程序 serve 端，今天我们用的是windows版本的mosqui ...
2021-12-07 23:34 0 122 推荐指数：
相关推荐
Flink CheckPoint奇技淫巧 | 原理和在生产中的应用
简介 Flink本身为了保证其高可用的特性，以及保证作用的Exactly Once的快速恢复，进而提供了一套强大的Checkpoint机制。 Checkpoint机制是Flink可靠性的基石，可以保 ...
mysql8在生产环境中的配置
一，配置文件的位置 说明：通常我们都会使用/etc/my.cnf这个文件 说明：刘宏缔的架构森林是一个专注架构的博客，地址：https://www.cnblogs.com/architectforest 对应的源码可以访问这里获取： https ...
Spring boot中最大连接数、最大线程数与最大等待数在生产中的异常场景
在上周三下午时，客户、业务和测试人员同时反溃生产环境登录进入不了系统，我亲自测试时，第一次登录进去了，待退出后再登录时，复现了客户的问题，场景像是请求连接被拒绝了，分析后判断是spring boot的连接数使用完了，于是重启了服务，客户访问都恢复正常。虽然问题暂时解决了，但实质原因还无法确定 ...
配置不同环境下启用swagger，在生产环境关闭swagger
前言 Swagger使用起来简单方便，几乎所有的API接口文档都采用swagger了。使用示例：http://www.cnblogs.com/woshimrf/p/swagger.html， 现在开发中可以参考文档，但生产环境并不想暴露出去。 配置 只要在不同环境中配置是否启用就可以 ...
zookeeper在生产环境中的配置(zookeeper3.6)
一，zookeeper中日志的配置 1，快照文件snapshot的目录: 存储快照文件snapshot的目录。默认情况下，事务日志也会存储在这里 所以我们建议指定dataLogDir 2,事务日志的目录 事务日志输出目录,不建议和快照文件写在一个目录 ...
产品缺陷：请勿在生产环境中使用 ESXi 7 Update 3
VMware 移除了 ESXi 7 Update 3 下载，vCenter Server 7 Update 3 不受影响 请访问原文链接：{% post_link https://sysin.cn/ ...
血的教训!千万别在生产使用这些 redis 指令
哎，最近小黑哥又双叒叕犯事了。 事情是这样的，前一段时间小黑哥公司生产交易偶发报错，一番排查下来最终原因是因为 Redis 命令执行超时。 可是令人不解的是，生产交易仅仅使用 Redis set 这个简单命令，这个命令讲道理是不可能会执行这么慢。 那到底是什么导致这个问题那？ 为了找出 ...