在IntelliJ IDEA中建立和運行java/scala/spark程序

本文將分兩部分來介紹如何在IntelliJ IDEA中運行Java/Scala/Spark程序：

• 基本概念介紹
• 在IntelliJ IDEA中建立和運行java/scala/spark程序

基本概念介紹

IntelliJ IDEA

本文使用版本爲： ideaIC-2020.1

IDEA 全稱 IntelliJ IDEA，是java編程語言開發的集成環境。IntelliJ在業界被公認爲最好的java開發工具，它的旗艦版本還支持HTML，CSS，PHP，MySQL，Python等，免費版只支持Java，Scala等少數語言。若是隻開發Java和Scala，去官網下載社區版便可：https://www.jetbrains.com/idea/.

Java

本文使用版本爲：java 8

編程語言，不解釋。在IDE以外運行Java程序的方式以下：

javac HelloWord.java // 先編譯源碼 ---->java HelloWord.class
java.exe  HelloWord // 直接運行

實際開發中每一個java程序都會依賴其餘的包，也就是jar，這種狀況你必須告訴java.exe 你的jar包都在哪裏，告訴java的方式就是經過classpath指定，一般咱們都會在系統環境變量中創建一個CLASSPATH的環境變量，這樣java會在這裏尋找你程序依賴的包。固然也能夠在運行時指定，這樣的話程序執行的方式就是下面的樣子：

java.exe  -classpath "D:\Program Files\java-se-8u41-ri\jre\lib\charsets.jar;..."  HelloWord
//  -classpath: Java程序以來包或包的路徑，Windows下用 ; 分開。

能夠本身下載安裝Javaj的JDK，也能夠直接從IDEA上下載和管理，建議使用後者。

File -> Project Structure -> Platform Setting -> SDKs -> + -> Download JDK

能夠下載多個版本，對不一樣的程序使用不一樣的配置，很方便。

Scala

本文使用版本爲：Scala 2.11.12

Scala是一門多範式的編程語言，一種相似java的編程語言 ，設計初衷是實現可伸縮的語言 、並集成面向對象編程和函數式編程的各類特性。它一方面吸取繼承了多種語言中的優秀特性，一方面又沒有拋棄Java這個強大的平臺，它運行在Java虛擬機（JavaVirtualMachine）之上，輕鬆實現和豐富的Java類庫互聯互通。

基於Java的編程語言，支持多種運行方式：

1. 像python同樣，交互式運行

// scala
scala> println("HelloWorld")
HelloWorld
// python
python> print("HelloWorld")
HelloWorld

1. 像python同樣命令運行

// scala 
scala script.scala 
// python
python script.py

1. 用scalac或fsc編譯爲.class 或 jar 再用java命令運行，每次scalac編譯都須要啓動一個JVM

Scala能夠自行安裝下載，也能夠利用IDEA中的插件自行下載，推薦後者，下載方式爲：

File -> Project Structure -> Platform Setting -> Global Libraries -> + -> Download...

同時，也須要下載scala的插件：

File -> Settings... -> Plugins -> Marketplace ... -> [ Search Scala ]

因此，Scala像是一門新的編程語言，又和Java有着密不可分的聯繫。

Maven

管理依賴，和構建Java項目的工具，很少介紹，能夠自行下載也能夠直接使用IDEA中自帶的版本，插件下載方式：

File -> Settings... -> Plugins -> Marketplace ... -> [ Search Maven ]

Spark

本文使用版本爲：spark 2.4.5

Apache Spark 是專爲大規模數據處理而設計的快速通用的計算引擎。SparkSpark 是在 Scala 語言中實現的，它將 Scala 用做其應用程序框架。Spark既不是SDK也不是Global Libriaries，在IDEA中能夠像使用普通的包同樣使用spark。若是想使用spark-shell，能夠自行下載。

---

綜上可知：Spark用Scala實現，Scala又構建於JVM之上，和Java之間能夠密切互通。因此要想開發Spark程序，必須對三者及其關係有必定的瞭解。

在IntelliJ IDEA中建立和運行java/scala/spark程序

建立並運行Java程序

1. 新建項目

選擇 Create Project 建立Java/Scala程序，這一步關鍵是要選擇你的JDK。若是你下載或安裝了多個版本的JDK且被IDEA識別，那麼你能夠用下拉列表選擇合適的JDK的版本。

1. 新建Package

在 src目錄上右鍵，選擇新建Package，也就是你的代碼所在的包名，這一步能夠跳過。

1. 新建Class

在包所在的目錄上右鍵，新建Java/Scala Class

1. 設置源碼目錄

這一步也很重要，須要把src目錄設置成源碼目錄，由於IDEA只會在源碼目錄下找你的程序。

1. 編寫代碼

爲了完整演示如何運行程序，代碼中加入了對第三方庫的引用。

package com.example;

import org.apache.logging.log4j.LogManager;
import org.apache.logging.log4j.Logger;

public class HelloWord {
    static final Logger logger = LogManager.getLogger(HelloWord.class.getName());

    public static void main(String[] args) {
        logger.entry();
        logger.error("Inside Hello Logger!");
        logger.exit(false);
    }
}

那麼問題來了，如何告訴java你的第三方包在哪裏呢？若是建立的是Maven項目，能夠在Maven項目中添加依賴，具體配置網上都有教程，能夠直接參考，而後別忘了讓maven同步一下，把以來加載到本地：

若是你建立的不是Maven項目，那麼你須要本身管理你本身的依賴。咱們經過以下方式將你引用的jar包手動添加進來：

File -> Project Structure -> Project Setting -> Libraries -> + -> Java..

添加完以後你的配置會長這個樣子：

而後咱們就能夠經過Run命令運行這個HelloWord 程序了，運行的時候直接選擇默認配置：

IDEA命令行中實際執行的命令以下，能夠看出也是用了 -classpath參數來指定依賴的。

D:\Program Files\java-se-8u41-ri\bin\java.exe
 -Djava.library.path=C:\Users\haipw\.m2\repository 
"-javaagent:D:\Program Files\JetBrains\IntelliJ IDEA Community Edition 2020.1\lib\idea_rt.jar=59878:D:\Program Files\JetBrains\IntelliJ IDEA Community Edition 2020.1\bin"
 -Dfile.encoding=UTF-8 -classpath 
"
D:\Program Files\java-se-8u41-ri\jre\lib\charsets.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\cldrdata.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\dnsns.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\localedata.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\nashorn.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunec.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunjce_provider.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunmscapi.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\sunpkcs11.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\ext\zipfs.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\jce.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\jsse.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\management-agent.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\resources.jar;
D:\Program Files\java-se-8u41-ri\jre\lib\rt.jar;
D:\Users\Java\TestJava\out\production\TestJava;
D:\OneDrive\apache-log4j-2.13.2-bin\log4j-api-2.13.2.jar;
D:\OneDrive\apache-log4j-2.13.2-bin\log4j-core-2.13.2.jar;
D:\OneDrive\apache-log4j-2.13.2-bin\log4j-core-2.13.2-tests.jar
"
com.example.HelloWord

固然，手動添加Libraries的方式並不推薦，此處演示也是爲了說明其中的原理 。實際中也偶爾遇到加載不成功等bug，首選的方式依然是用maven管理，可是道理是同樣的。Maven管理的包會自動幫你生成相關配置，像下圖同樣：

建立並運行Scala/Spark程序

知道如何建立和運行java，再運行scala就很簡單了。區別只是你建立項目的時候要選擇Scala，而後新建一個 example.scala的源碼便可。在此略過。

---

總結

在IDEA中運行Java/Scala/Spark程序，推薦使用Maven進行依賴的管理，同時要注意以下事項：

• 保證你Project Structure 中的SDK 和 Global Libiaries 的版本正確。
• 在更新maven配置以後必定要從新加載一下，及時更新配置
• 運行程序必需要先配置，通常系統會自動生產一個配置，有時候須要本身添加或修改一些參數，請在 Edit Configuration 選項下打開並修改：

---

若是你以爲文章有幫助，能夠在任何平臺搜索」黑客悟理「 並關注我。感謝支持！

文末福利

更多資料： 2020 年 精選阿里 Java、架構、微服務精選等，加 v ❤ ：gongchengshi6678

本文由博客一文多發平臺 OpenWrite 發佈！