ETL讲解（很详细！！！） ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据。 ETL是BI项目重要的一个环节。 通常情况下，在BI项目中ETL会花掉整个项目至少1/3的时间,ETL设计 ...

================================可用作时序的数据库:================================[时序]TimescaleDB, 基于 Postgr ...

安装VirtualBox为了共享文件夹，折腾了一晚上！网上的很多资料都不是很全面，这里就全面的总结一下，如果有其他的疑问，可以留言多多交流。 VirtualBox下载地址,版本为5.1.2 ...

前言 数据仓库建模包含了几种数据建模技术，除了之前在数据库系列中介绍过的ER建模和关系建模，还包括专门针对数据仓库的维度建模技术。 本文将详细介绍数据仓库维度建模技术，并重点讨论三种基于ER建模/关系建模/维度建模的数据仓库总体建模体系：规范化数据仓库，维度建模数据仓库 ...

前言 上一篇重点讲解了数据仓库建模，它是数据仓库开发中最核心的部分。然而完整的数据仓库系统还会涉及其他一些组件的开发，其中最主要的是ETL工程，在线分析处理工具(OLAP)和商务智能(BI)应用等。 本文将对这些方面做一个总体性的介绍(尤其是OLAP)，旨在 ...

一、where条件 WHERE 子句中主要的运算符，可以在 WHERE 子句中使用，如下表： 运算符 描述 ...

上周因为在处理很多数据源集成的事情一直没有更新系列文章，在这周后开始规律更新。在维度建模中我们已经了解数据仓库中的维度建模方法以及基本要素，在这篇文章中我们将学习了解数据仓库的ETL过程以及实用的ETL工具。 一、什么是ETL？ 构建数据仓库的核心是建模 ...

如何用hive sql 实现 contain 查询？ 需求：判断某个字符串是否在另一个字符串中？ 方法： 可以自定义函数，但是用正则匹配regexp更方便 代码如下： 首先，查看regexp ...

一、crontab调度　　 　　对于linux 自带crontab而言， xxx.sh的一般编写格式以#!/bin/bash 解释器开头，可在脚本中加入： 但是，she ...

--=======================时间函数--======================= --当前时间戳now()current_timestamp() --当前时间戳相对于 ...