Spark SQL概念学习系列之DataFrame与RDD的区别
不多说，直接上干货！ DataFrame的推出，让Spark具备了处理大规模结构化数据的能力，不仅比原有的RDD转化方式更加简单易用，而且获得了更高的计算性能。Spark能够轻松实现从MySQL到DataFrame的转化，并且支持SQL查询 ...
原文：Spark SQL概念学习系列之Spark SQL基本原理
Spark SQL基本原理 Spark SQL模块划分 Spark SQL架构 catalyst设计图 Spark SQL运行架构 Hive兼容性 Spark SQL模块划分 Spark SQL模块划分为Core caralyst hive和hive ThriftServer四大模块。 Spark SQL依然是读取数据进去，然后你可以执行sql操作，然后你还可以执行其他的结构化操作，不光仅仅是只 ...
2017-04-10 21:59 0 8258 推荐指数：
相关推荐
Spark 概念学习系列之Spark 多语言编程
不多说，直接上干货！ Spark 同时支持Scala、Python、Java 三种应用程序API编程接口和编程方式， 考虑到大数据处理的特性，一般会优先使用Scala进行编程，其次是Python，最后才是Java。 无论使用Scala、Python ...
Spark RDD概念学习系列之RDD的容错机制（十七）
RDD的容错机制 RDD实现了基于Lineage的容错机制。RDD的转换关系，构成了compute chain，可以把这个compute chain认为是RDD之间演化的L ...
Spark RDD概念学习系列之如何创建Pair RDD
不多说，直接上干货！ 创建Pair RDD scala语言 Java语言 ...
Spark RDD概念学习系列之RDD的五大特征
不多说，直接上干货！ RDD的五大特征 分区--- partitions 依赖--- dependencies() 计算函数--- computer ...
sql注入基本原理
SQL注入基本原理 WEB技术发展日新月异，但是徒手拼SQL的传统手艺还是受相当多的开发者亲睐。毕竟相比于再去学习一套复杂的ORM规则，手拼更说方便，直观。通常自己拼SQL的人，应该是有听说过SQL注入很危险，但是总是心想：我的SQL语句这么简单，不可能被注入的。 花5分钟看完这个完整的例子 ...
Spark学习之Spark SQL
Spark SQL 一、Spark SQL基础 1、Spark SQL简介 Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个编程抽象叫做DataFrame并且作为分布式SQL查询引擎的作用。http://spark.apache.org/sql/ 为什么要学习 ...