原文:sbt結合IDEA對Spark進行斷點調試開發

原創文章,謝絕轉載 筆者出於工作及學習的目的,經常與Spark源碼打交道,也難免對Spark源碼做修改及測試。本人一向講究借助工具提升效率,開發Spark過程中也在摸索如何更加順暢的對源碼進行調試。 Spark基於Scala,采用IntelliJ IDEA和sbt應對日常開發,自然是最佳選擇了。如何導入及編譯Spark項目,網上資料很多,官網給的教程也比較詳細: http: spark.apac ...

2017-05-15 08:48 0 2869 推薦指數:

查看詳情

IDEA 學習筆記之 Spark/SBT項目開發

Spark/SBT項目開發: 下載Scala SDK 下載SBT 配置IDEA SBT:(如果不配置,就會重新下載SBT, 非常慢,因為以前我已經下過了,所以要配置為過去使用的SBT) 新建立SBT項目: 導入Spark jars: 創建 ...

Sun Sep 17 19:04:00 CST 2017 0 1345
windows下Idea結合maven開發spark和本地調試

本人的開發環境: 1.虛擬機centos 6.5 2.jdk 1.8 3.spark2.2.0 4.scala 2.11.8 5.maven 3.5.2 在開發和搭環境時必須注意版本兼容的問題,不然會出現很多莫名其妙的問題 ...

Mon Nov 27 00:23:00 CST 2017 0 3680
IDEA調試總結(設置斷點進行調試

IDEA調試總結(設置斷點進行調試) 黑背景版: 先編譯好要調試的程序。1.設置斷點選定要設置斷點的代碼行,在行號的區域后面單擊鼠標左鍵即可。 2.開啟調試會話 點擊紅色箭頭指向的小蟲子,開始進入調試。IDE下方出現Debug視圖,紅色的箭頭指向的是現在調試程序停留的代碼行 ...

Wed Sep 06 18:54:00 CST 2017 11 46484
Idea 進行斷點調試的 快捷鍵

快捷鍵 功能描述F8 單步調試,不進入函數內部F7 單步調試,進入函數內部Shift+F7 選擇要進入的函數Shift+F8 跳出函數Alt+F9 運行到斷點Alt+F8 執行表達式查看結果F9 繼續執行,進入下一個斷點或執行完程序Ctrl+F8 設置/取消當前行斷點Ctrl+Shift+F8 ...

Mon Sep 23 21:02:00 CST 2019 0 8396
IDEA 條件斷點 進行debug調試

1. 鼠標左鍵在要斷點的行號點擊一下,打個斷點 2.鼠標移動到斷點處,然后點擊一下鼠標右鍵,之后會彈出: 3.填寫條件,可以使用該行中的代碼對應的變量作為條件 4.點擊Done按鈕 至此條件斷點設置完成 ...

Sat Dec 14 23:55:00 CST 2019 0 691
022-docker與idea結合使用,以及docker斷點調試

1、idea配置docker 部署 1.1、服務器端:服務器配置docker遠程連接 http://ip地址:2375/version 1.2、本地下載插件docker,然后配置 連接成功后我們便可查看docker下的容器和鏡像 然后添加dockerfile配置 ...

Sun Jan 30 05:59:00 CST 2022 2 964
IDEA2017 maven Spark HelloWorld項目(本地斷點調試

作為windows下的spark開發環境 1.應用安裝 首先安裝好idea2017 java8 scalaJDK spark hadoop(注意scala和spark的版本要匹配) 2.打開idea,創建建maven項目,如圖所示 項目創建好后,記得勾選 ...

Fri Jan 05 22:26:00 CST 2018 0 1976
 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM