#研发解决方案#discache-分布式缓存查询与管理系统
郑昀 基于马海元和闫小波的文档 关键词： memcached 、redis、分布式缓存、控制台、反序列化、Java 本文档适用人员：研发和运维员工 提纲： 如何查看缓存里 ...
原文：#研发解决方案#分布式并行计算调度和管理系统Summoner
郑昀 创建于 最后更新于 关键词：佣金计算 定时任务 数据抽取 数据清洗 数据计算 Java Redis MySQL Zookeeper azkaban oozie mesos 提纲： 为什么要做 数据 并行计算调度 他山之玉：azkaban oozie mesos Summoner的特性 Summoner 是国玺部门推出的基于 MySQL Redis Zookeeper 的分布式并行计算调度和 ...
2016-01-08 10:52 1 3486 推荐指数：
相关推荐
分布式并行计算MapReduce
这个作业的要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3319。 1.用自己的话阐明Hadoop平台上HDFS和MapReduce的功能、工作原理和工作过程。 HDFS 功能：分布式文件系统，用来存储海量 ...
并行计算与分布式计算
并行计算与分布式计算之间的关系？ 并行计算的核心要点是时间上并行，分布式计算的核心要点是空间上分离，两者是不同的概念。 并行计算可以是分布式的，也可以不是分布式的。 分布式计算可以是并行的，也可以不是并行的。 ...
并行计算与分布式计算区别与联系
并行计算、分布式计算以及网格计算和云计算都是属于高性能计算（HPC）的范畴，主要目的在于对大数据的分析与处理，但它们却存在很多差异。我们需要了解两者的原理、特点和运用的场合，对云计算的了解大有裨益。 之所以将两种计算技术放在一起，是因为这两种计算具有共同的特点，都是运用并行来获得更高 ...
#研发解决方案#分布式抓取管理平台-魔镜
郑昀 2016/3 关键词：爬虫、Crawler、分布式、竞情分析、自动分片、 本文档适用人员：研发和数据员工 提纲： 一个点解决不了，那就引入成百上千点 master-slave管理模式 分布式爬虫任务的管理 小结 ...
分布式的并行计算技术
大数据主要环节： 数据准备--->数据存储和管理--->计算处理--->数据分析--->知识展现 在数据存储和管理中，GFS（谷歌文件系统，GOOGLE FILE SYSTEM）和HDFS（Hadoop的分布式文件系统）是奠定了大数据存储技术的基础。GFS/HDFS ...
【并行计算】用MPI进行分布式内存编程（一）
通过上一篇关于并行计算准备部分的介绍，我们知道MPI（Message-Passing-Interface 消息传递接口）实现并行是进程级别的，通过通信在进程之间进行消息传递。MPI并不是一种新的开发语言，它是一个定义了可以被C、C++和Fortran程序调用的函数库。这些函数库里面主要涉及 ...