本文將分兩部分來介紹如何在IntelliJ IDEA中運行Java/Scala/Spark程序:
- 基本概念介紹
- 在IntelliJ IDEA中創建和運行java/scala/spark程序
基本概念介紹
IntelliJ IDEA
本文使用版本為: ideaIC-2020.1
IDEA 全稱 IntelliJ IDEA,是java編程語言開發的集成環境。IntelliJ在業界被公認為最好的java開發工具,它的旗艦版本還支持HTML,CSS,PHP,MySQL,Python等,免費版只支持Java,Scala等少數語言。如果只開發Java和Scala,去官網下載社區版即可:https://www.jetbrains.com/idea/.
Java
本文使用版本為:java 8
編程語言,不解釋。在IDE之外運行Java程序的方式如下:
javac HelloWord.java // 先編譯源碼 ---->java HelloWord.class
java.exe HelloWord // 直接運行
實際開發中每個java程序都會依賴其他的包,也就是jar,這種情況你必須告訴java.exe 你的jar包都在哪里,告訴java的方式就是通過classpath指定,通常我們都會在系統環境變量中建立一個CLASSPATH的環境變量,這樣java會在這里尋找你程序依賴的包。當然也可以在運行時指定,這樣的話程序執行的方式就是下面的樣子:
java.exe -classpath "D:\Program Files\java-se-8u41-ri\jre\lib\charsets.jar;..." HelloWord
// -classpath: Java程序以來包或包的路徑,Windows下用 ; 分開。
可以自己下載安裝Javaj的JDK,也可以直接從IDEA上下載和管理,建議使用后者。
File -> Project Structure -> Platform Setting -> SDKs -> + -> Download JDK
可以下載多個版本,對不同的程序使用不同的配置,很方便。
Scala
本文使用版本為:Scala 2.11.12
Scala是一門多范式的編程語言,一種類似java的編程語言 ,設計初衷是實現可伸縮的語言 、並集成面向對象編程和函數式編程的各種特性。它一方面吸收繼承了多種語言中的優秀特性,一方面又沒有拋棄Java這個強大的平台,它運行在Java虛擬機(JavaVirtualMachine)之上,輕松實現和豐富的Java類庫互聯互通。
基於Java的編程語言,支持多種運行方式:
- 像python一樣,交互式運行
// scala
scala> println("HelloWorld")
HelloWorld
// python
python> print("HelloWorld")
HelloWorld
- 像python一樣命令運行
// scala
scala script.scala
// python
python script.py
- 用scalac或fsc編譯為.class 或 jar 再用java命令運行,每次scalac編譯都需要啟動一個JVM
Scala可以自行安裝下載,也可以利用IDEA中的插件自行下載,推薦后者,下載方式為:
File -> Project Structure -> Platform Setting -> Global Libraries -> + -> Download...
同時,也需要下載scala的插件:
File -> Settings... -> Plugins -> Marketplace ... -> [ Search Scala ]
所以,Scala像是一門新的編程語言,又和Java有着密不可分的聯系。
Maven
管理依賴,和構建Java項目的工具,不多介紹,可以自行下載也可以直接使用IDEA中自帶的版本,插件下載方式:
File -> Settings... -> Plugins -> Marketplace ... -> [ Search Maven ]
Spark
本文使用版本為:spark 2.4.5
Apache Spark 是專為大規模數據處理而設計的快速通用的計算引擎。SparkSpark 是在 Scala 語言中實現的,它將 Scala 用作其應用程序框架。Spark既不是SDK也不是Global Libriaries,在IDEA中可以像使用普通的包一樣使用spark。如果想使用spark-shell,可以自行下載。
綜上可知:Spark用Scala實現,Scala又構建於JVM之上,和Java之間可以密切互通。所以要想開發Spark程序,必須對三者及其關系有一定的了解。
在IntelliJ IDEA中創建和運行java/scala/spark程序
創建並運行Java程序
- 新建項目
選擇 Create Project 創建Java/Scala程序,這一步關鍵是要選擇你的JDK。如果你下載或安裝了多個版本的JDK且被IDEA識別,那么你可以用下拉列表選擇合適的JDK的版本。
- 新建Package
在 src目錄上右鍵,選擇新建Package,也就是你的代碼所在的包名,這一步可以跳過。
- 新建Class
在包所在的目錄上右鍵,新建Java/Scala Class
- 設置源碼目錄
這一步也很重要,需要把src目錄設置成源碼目錄,因為IDEA只會在源碼目錄下找你的程序。
- 編寫代碼
為了完整演示如何運行程序,代碼中加入了對第三方庫的引用。
package com.example;
import org.apache.logging.log4j.LogManager;
import org.apache.logging.log4j.Logger;
public class HelloWord {
static final Logger logger = LogManager.getLogger(HelloWord.class.getName());
public static void main(String[] args) {
logger.entry();
logger.error("Inside Hello Logger!");
logger.exit(false);
}
}
那么問題來了,如何告訴java你的第三方包在哪里呢?如果創建的是Maven項目,可以在Maven項目中添加依賴,具體配置網上都有教程,可以直接參考,然后別忘了讓maven同步一下,把以來加載到本地:
如果你創建的不是Maven項目,那么你需要自己管理你自己的依賴。我們通過如下方式將你引用的jar包手動添加進來:
File -> Project Structure -> Project Setting -> Libraries -> + -> Java..
添加完之后你的配置會長這個樣子:
然后我們就可以通過Run命令運行這個HelloWord 程序了,運行的時候直接選擇默認配置:
IDEA命令行中實際執行的命令如下,可以看出也是用了 -classpath參數來指定依賴的。
D:\Program Files\java-se-8u41-ri\bin\java.exe
-Djava.library.path=C:\Users\haipw\.m2\repository
"-javaagent:D:\Program Files\JetBrains\IntelliJ IDEA Community Edition 2020.1\lib\idea_rt.jar=59878:D:\Program Files\JetBrains\IntelliJ IDEA Community Edition 2020.1\bin"
-Dfile.encoding=UTF-8 -classpath
"
D:\Program Files\java-se-8u41-ri\jre\lib\charsets.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\cldrdata.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\dnsns.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\localedata.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\nashorn.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunec.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunjce_provider.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunmscapi.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunpkcs11.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\zipfs.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\jce.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\jsse.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\management-agent.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\resources.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\rt.jar;
D:\Users\Java\TestJava\out\production\TestJava;
D:\OneDrive\apache-log4j-2.13.2-bin\log4j-api-2.13.2.jar;
D:\OneDrive\apache-log4j-2.13.2-bin\log4j-core-2.13.2.jar;
D:\OneDrive\apache-log4j-2.13.2-bin\log4j-core-2.13.2-tests.jar
"
com.example.HelloWord
當然,手動添加Libraries的方式並不推薦,此處演示也是為了說明其中的原理 。實際中遇到一些手動設置依賴加載不成功等bug,十分煩人,所以首選的方式依然是用maven管理,但是道理是一樣的。Maven管理的包會自動幫你生成相關配置,像下圖一樣:
創建並運行Scala/Spark程序
知道如何創建和運行java,再運行scala就很簡單了。區別只是你創建項目的時候要選擇Scala,然后新建一個 example.scala的源碼即可。在此略過。
總結
在IDEA中運行Java/Scala/Spark程序,推薦使用Maven進行依賴的管理,同時要注意如下事項:
- 保證你Project Structure 中的SDK 和 Global Libiaries 的版本正確。
- 在更新maven配置之后一定要重新加載一下,及時更新配置
- 運行程序必須要先配置,一般系統會自動生產一個配置,有時候需要自己添加或修改一些參數,請在 Edit Configuration 選項下打開並修改:
如果你覺得文章有幫助,可以在任何平台搜索”黑客悟理“ 並關注我。感謝支持!
如果你喜歡以上內容,歡迎到我的個人主頁關注我:Homepage