When I write PySpark code, I use Jupyter notebook to test my code before submitting a job on the cluster. In this post, I will show you how ...
第一步:安装anaconda anaconda自带一系列科学计算包 下载链接:http: pan.baidu.com s b jWlg 密码:fqq 接着配置环境变量:如我安装在D盘下 试一下命令行启动,确保ipython从anaconda启动 第二步:安装spark 需要提前安装JDK 到官网下载spark安装包 http: spark.apache.org downloads.html 我下的 ...
2016-08-05 11:18 0 5785 推荐指数:
When I write PySpark code, I use Jupyter notebook to test my code before submitting a job on the cluster. In this post, I will show you how ...
1、搭建基本spark+Hadoop的本地环境 https://blog.csdn.net/u011513853/article/details/52865076?tdsourcetag=s_pcqq_aiomsg 2、下载对应的spark与pyspark的版本进行安装 https ...
本地登陆 cmd输入下面的命令,会进入用户主目录 在浏览器打开时,提示输入token,复制命令行上的token还是不能进入,其实浏览器上有提示的,按照提示操作即可,输入“jupyter notebook list”,然后可以看到当前运行的服务以及相应的token,将 "b2d ...
安装需要如下东西: java jdk-8u181-windows-x64.exe spark spark-2.1.3-bin-hadoop2.7 hadoop(版本要与spark的一致,这里都是hadoop2.7) hadoop-2.7.7 Anaconda(这个是为了预防 ...
1、环境规划(我是在虚拟机环境下安装的)win03 192.168.2.57(管理节点,存储节点,sql节点)win03 192.168.2.56(存储节点,sql节点) 2、安装程序 在两台机器上面同时进行 第一步: 下载安装软件地址:https ...
XAMPP是一款开源、免费的网络服务器软件,经过简单安装后,就可以在个人电脑上搭建服务器环境。本文为大家介绍Windows中安装XAMPP(Apache+Mysql+PHP)及使用方法及其相关问题的总结。 一、什么是XAMPP XAMPP(X-系统,A-Apache ...
说明:1、PLSQL Developer是远程连接Oracle数据库的一个可视化工具,并且其不是一个独立的软件,是需要依赖Oracle客户端运行的。2、本安装教程是基于本机没有安装Oracle数据库的前提。 步骤1:下载安装Oracle客户端 去Oracle官网下载,下载地址: https ...