任务执行引擎的工程实践 来某厂接近半年了，几乎没写过C++代码，说实话还真的有点手生。最近刚好有一个需求，然而我感觉我也没有办法用C++以外的语言去实现它。于是还是花了几天时间用C++完成编码，这是一个简单的任务执行引擎，它被我称作panguan。写这 篇文章主要记录一下开发过程中的一些 ...

前言： 最近做的一个项目是一个数据库服务化的管控平台，用时髦一点的名词来说是一个DBaaS产品。这种面向云化的产品，呈现给最终用户的体验是提供一个管理页面，把数据库的生命周期，监控等功能通过WEB页面或者Open API暴露给用户或者第三方的程序，常见的产品类似于阿里云或者AWS的RDS。而我 ...

随着互联网数据规模的爆炸式增长, 如何从海量的历史, 实时数据中快速获取有用的信息, 变得越来越有挑战性. 一个中等的电商平台, 每天都要产生百万条原始数据, 上亿条用户行为数据. 一般来说, 电商数据一般有3种主要类型的数据系统: 1. 关系型数据库, 大多数互联网公司 ...

前言 在实时计算中，通常是从队列中收集原始数据，这种原始数据在内存中通常是一个java bean，把数据收集过来以后，通常会把数据落地到数据库，供后面的ETL使用。举个一个简单的例子，对一个游戏来说，为了统计某个游戏，某个服务器的登陆注册 等事件，原始数据对应的java bean可能会 ...

工程实践：如何给变量取一个好的名字 　　在上一篇文章中跟大家分享了关于函数命名的一些实践心得，今天我们继续命名这个话题，来讲一讲如何对变量命名。 　　以下是本文的目录大纲： 　　一. 变量命名风格 　　二. 变量命名最高境界 　　三. 变量命名最佳实践 　　若有不正之处请多多谅解 ...

工程实践：给函数取一个"好"的名字 　　早在2013年，国外有个程序员做了一个有意思的投票统计（原始链接请见：《程序员：你认为最难做的事情是什么？》），该投票是让程序员从以下几个选项中选出平时在工作中自己认为最难做的事情： 做项目方案设计 编写测试用例 撰写设计文档 ...

执行 上一篇讲述了如何通过scala提供的内置DSL支持，实现一个可以解析sql的解析器，这篇讲如何拿到了解析结果-AST以后，如何在数据上进行操作，得到我们想要的结果。之前说到，为什么选择scala作为这个引擎的实现，之一是scala提供了方便的DSL实现支持，其二是因为作为一门函数式编程语言 ...

实现一个并发任务执行框架。 作者：IT王小二 博客：https://itwxe.com 一、需求产生和分析 问题参考来自网络。 公司里有两个项目组，考试组有批量的离线文档要生成，题库组则经常有批量的题目进行排重和根据条件批量修改题目的内容。 架构组通过对实际的上线产品 ...