spark-shell和spark-sql


1.启动spark-shell

./spark-shell --master local[2] --jars /usr/local/jar/mysql-connector-java-5.1.47.jar

maste:制定运行模式
local[2]:local本地模式  [2]:2个CUP来运行spark-shell
--jars: 制定jar包   ,用逗号隔开可以制定多个jar包

2.启动spark-sql

./spark-sql --master local[2] --jars /usr/local/jar/mysql-connector-java-5.1.47.jar --driver-class-path /usr/local/jar/mysql-connector-java-5.1.47.jar

  


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM