实验4 RDD编程初级实践
1．spark-shell交互式编程 （1） 该系总共有多少学生 scala> val lines = sc.textFile("file:///usr/local/spark/sparklab/Data01.txt") lines ...
原文：实验 2 Scala 编程初级实践
实验 Scala 编程初级实践 一 实验目的 .掌握 Scala 语言的基本语法 数据结构和控制结构 .掌握面向对象编程的基础知识，能够编写自定义类和特质 .掌握函数式编程的基础知识，能够熟练定义匿名函数。熟悉 Scala 的容器类库的基本 层次结构，熟练使用常用的容器类进行数据 .熟练掌握 Scala 的 REPL 运行模式和编译运行方法。 二 实验平台 已经配置完成的 Scala 开发环境。S ...
2020-02-04 16:33 0 1132 推荐指数：
相关推荐
实验 4 RDD 编程初级实践
注意：spark的编码格式是utf-8，其他的格式会有乱码，所以文件要使用utf-8编码 pom.xml： View Code （1）该系总共有多少学生 ...
spark实验(五)--Spark SQL 编程初级实践(1)
一、实验目的 （1）通过实验掌握 Spark SQL 的基本编程方法； （2）熟悉 RDD 到 DataFrame 的转化方法； （3）熟悉利用 Spark SQL 管理来自不同数据源的数据。 二、实验平台 操作系统： centos6.4 Spark 版本：1.5.0 数据库 ...
RDD 编程初级实践
一、实验目的 （1）熟悉 Spark 的 RDD 基本操作及键值对操作； （2）熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统：Ubuntu16.04 Spark ...
RDD编程初级实践
一、实验目的 （1）熟悉 Spark 的 RDD 基本操作及键值对操作； （2）熟悉使用 RDD 编程解决实际具体问题的方法。 二、实验平台 操作系统：Ubuntu16.04 Spark ...
Flink初级编程实践报告
题目：Flink初级编程实践 日期：2021.12.24 实验环境： 操作系统：Ubuntu 18.06 Hadoop版本：3.3.1 flink版本：1.9.1 JDK版本：1.8 ...
SPark SQL编程初级实践
今下午在课上没有将实验做完，课下进行了补充，最终完成。下面附上厦门大学数据库实验室中spark实验官网提供的标准答案，以供参考。 三、实验内容和要求 1．Spark SQL 基本操作 将下列 json 数据复制到你的 ubuntu 系统/usr/local/spark ...
Spark SQL 编程初级实践1-Spark SQL 基本操作
Spark SQL 基本操作将下列 JSON 格式数据复制到 Linux 系统中，并保存命名为 employee.json。 { "id":1 , "name":" Ella" , "age":36 ...