Drools是一款基于Java的开源规则引擎 　　实现了将业务决策从应用程序中分离出来。 　　优点： 　　　　1、简化系统架构，优化应用 　　　　2、提高系统的可维护性和维护成本 　　　　3、方便系 ...

今天突然在网上看到别人的面试题，觉得有点好奇想做一下，突然发现sql server的语法对于hive是不适用的。于是各种查资料。 然后发现hive中没有直接获取到当前时间的函数，而且对于时间定义的函 ...

今天要部署一个服务化的接口程序，需要创建一个Python的虚拟环境。 1、安装虚拟环境 2 安装完虚拟环境后，如果提示找不到mkvirtualenv命令，须配置环境变量： ...

今天碰到了两个表做关联查询的mysql，这两个表的数据量都是特别大的，有一个表的数据是上亿条的数据，有一个是几百万的数据， 查询的速度是特别慢，然后我看了一下执行计划，下面是执行执行计划： 看 ...

1．工作流调度工具：（azkaban 和oozie的对比） 工作流调度：一个完整的数据分析系统通常都是由大量任务单元组成：shell脚本程序，java程序，mapreduce程序、hiv ...

最近发现通过sqoop将oracle数据库当中的数据到如到hive当中，发现oracle数据库当中number类型的数据变成了hive当中的double类型。不只是变成了double类型，数据好像稍微 ...

今天在将写成的Python文件打包。然后给别人执行。打包了好多次都执行不了。真坑。 报的错是各种module找不到 Module Not Found Error: No module named ...

我们都知道在进行hive的查询的时候，设置合理的reduce个数能够使计算的速度加快。 具体的提高速度的方法有下面这些： (1) 　　　hive.exec.reducers.bytes.per. ...

1、Spark Streaming简介 　　官方网站解释：http://spark.apache.org/docs/latest/streaming-programming-guide.html ...

选择机制中的概念 serverId（服务器ID 既 myid） 比如有三台服务器，编号分别是1,2,3。 编号越大在选择算法中的权重越大。 zxid（最新的事物ID 既 L ...