原文:一次數據倉庫報表測試(1)

.背景 最近寶路接到了一個數據倉庫報表POC的壓測任務 就一個廠商為啥還叫POC .有點滑稽 ,本次記錄下測試過程中遇到的問題及分析問題的思路。 .測試環境架構圖 發壓策略:LR模擬業務人員 gt gt 某BI報表系統 gt gt PostgreSQL集群 .遇到的問題 .問題及分析 往PostgreSQL集群節點存放文件 PostgreSQL集群四台server是由一個管理節點進行統一管理的 ...

2019-09-08 13:19 3 302 推薦指數:

查看詳情

一次數據庫壓力測試的故事

前言 最近配合某客戶做了一個關於XX系統的壓力測試,其實經過和客戶的溝通得知,客戶此系統上線后壓力並不大,但由於應用方前期的表現不是特別盡如人意,對此不太信任,所以要求本次壓力測試着重觀察。 參與方 我、客戶、應用方(我和客戶簡稱甲方,應用方簡稱乙方) 環境配置 數據庫:RAC一體機集群 ...

Mon Mar 25 19:18:00 CST 2019 2 2210
ETL測試數據倉庫測試入門

概述 在我們學習ETL測試之前,先了解下business intelligence(即BI)和數據倉庫。 什么是BI? BI(Business Intelligence)即商務智能,它是一套完整的解決方案,用來將企業中現有的數據(原始數據或商業數據或業務數據等)進行有效的整合,快速准確 ...

Tue Jun 04 18:48:00 CST 2019 0 863
Redis一次數據丟失

一台Redis服務器,4核,16G內存且沒有任何硬件上的問題。持續高壓運行了大約3個月,保存了大約14G的數據,設置了比較完備的Save參數。而就是這台主機,在一次重起之后,丟失了大量的數據,14G的數據最終只恢復了幾百兆而已。 正常情況下,像Redis這樣定期回寫磁盤的內存數據庫,丟失幾個數據 ...

Fri Sep 08 19:17:00 CST 2017 0 1801
什么是數據倉庫?如何構建數據倉庫

1. 什么是數據倉庫? 在wiki中對數據倉庫的解釋是:   在計算中,數據倉庫(DW或DWH),也稱為企業數據倉庫(EDW),是用於報告和數據分析的系統,被認為是商業智能的核心組成部分 DW是來自一個或多個不同來源的集成數據的中央存儲庫。 他們將當前和歷史數據存儲在一個地方,用於為整個企業 ...

Sat Jul 18 05:27:00 CST 2020 0 806
數據倉庫】|1 所以,什么是數據倉庫

聲明: 1. 本欄是個人總結,如有錯漏,請指正 2. 數據倉庫的構建目前業界只有指導方案,並沒有統一的標准,每個公司都可以按照實際情況進行設計 3. 本總結參考《阿里巴巴大數據之路》、《數據倉庫工具箱》 產生背景 ...

Wed May 19 01:22:00 CST 2021 0 1227
數據倉庫(四)——數據倉庫系統

第一章 數倉搭建-ODS層 1)保持數據原貌不做任何修改,起到備份數據的作用。 2)數據采用LZO壓縮,減少磁盤存儲空間。100G數據可以壓縮到10G以內。 3)創建分區表,防止后續的全表掃描,在企業開發中大量使用分區表。 4)創建外部表。在企業開發中,除了自己用的臨時表,創建內部表外 ...

Thu Feb 17 22:10:00 CST 2022 0 695
HIVE—數據倉庫

1、 hive是什么? Hive是基於 Hadoop 的一個數據倉庫工具: 1. hive本身不提供數據存儲功能,使用HDFS做數據存儲; 2. hive也不分布式計算框架,hive的核心工作就是把sql語句翻譯成MR程序; 3. hive也不提 ...

Wed Jan 09 22:40:00 CST 2019 0 837
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM