sparkSQL原理和使用——一般在生產中，基本都是使用hive做數據倉庫存儲數據，然后用spark從hive讀取數據進行處理
一、spark SQL概述 1.1 什么是spark SQL Spark SQL是Spark用來處理結構化數據的一個模塊，它提供了一個編程抽象叫做DataFrame並且作為分 ...
原文：mqtt 在生產中的配置使用實例
https: www.cnblogs.com qianxiaoruofeng p .html 消息隊列是計算機中不可或缺的一個重要角色，用好mq 能給我們的工作減少更多的工作量，提高辦公的效率。 什么是mqtt ，先了解一下。 https: mqtt.org https: www.emqx.com zh 下載服務端程序 和客戶端的程序 serve 端，今天我們用的是windows版本的mosqui ...
2021-12-07 23:34 0 122 推薦指數：
相關推薦
Flink CheckPoint奇技淫巧 | 原理和在生產中的應用
簡介 Flink本身為了保證其高可用的特性，以及保證作用的Exactly Once的快速恢復，進而提供了一套強大的Checkpoint機制。 Checkpoint機制是Flink可靠性的基石，可以保 ...
mysql8在生產環境中的配置
一，配置文件的位置 說明：通常我們都會使用/etc/my.cnf這個文件 說明：劉宏締的架構森林是一個專注架構的博客，地址：https://www.cnblogs.com/architectforest 對應的源碼可以訪問這里獲取： https ...
Spring boot中最大連接數、最大線程數與最大等待數在生產中的異常場景
在上周三下午時，客戶、業務和測試人員同時反潰生產環境登錄進入不了系統，我親自測試時，第一次登錄進去了，待退出后再登錄時，復現了客戶的問題，場景像是請求連接被拒絕了，分析后判斷是spring boot的連接數使用完了，於是重啟了服務，客戶訪問都恢復正常。雖然問題暫時解決了，但實質原因還無法確定 ...
配置不同環境下啟用swagger，在生產環境關閉swagger
前言 Swagger使用起來簡單方便，幾乎所有的API接口文檔都采用swagger了。使用示例：http://www.cnblogs.com/woshimrf/p/swagger.html， 現在開發中可以參考文檔，但生產環境並不想暴露出去。 配置 只要在不同環境中配置是否啟用就可以 ...
zookeeper在生產環境中的配置(zookeeper3.6)
一，zookeeper中日志的配置 1，快照文件snapshot的目錄: 存儲快照文件snapshot的目錄。默認情況下，事務日志也會存儲在這里 所以我們建議指定dataLogDir 2,事務日志的目錄 事務日志輸出目錄,不建議和快照文件寫在一個目錄 ...
產品缺陷：請勿在生產環境中使用 ESXi 7 Update 3
VMware 移除了 ESXi 7 Update 3 下載，vCenter Server 7 Update 3 不受影響 請訪問原文鏈接：{% post_link https://sysin.cn/ ...
血的教訓!千萬別在生產使用這些 redis 指令
哎，最近小黑哥又雙叒叕犯事了。 事情是這樣的，前一段時間小黑哥公司生產交易偶發報錯，一番排查下來最終原因是因為 Redis 命令執行超時。 可是令人不解的是，生產交易僅僅使用 Redis set 這個簡單命令，這個命令講道理是不可能會執行這么慢。 那到底是什么導致這個問題那？ 為了找出 ...