第八天，我開始做林子雨實驗二： 首先在虛擬機上安裝scala(ubuntu)，下載地址https://www.scala-lang.org/download/； 在文件 ...

　　爬取首都之窗信件列表保存到TXT（下） 　　按照上一篇的操作，我們便可以得到之前列表頁整個一頁的操作了，當我們想要實現下一頁操作的時候我們發現網頁的地址並沒有發生變化，也就是說下一頁的按鈕只是調 ...

　　實驗二Scala 語言基礎 　　實驗一是對於linux系統的安裝和常用命令，在之前的博客園隨筆中已經有了記錄，所以便不再贅述，直接開始第二章關於scala語言的學習 　　對於scala語言，今天並沒有完全學習完，只是完成了實驗內容，在下面會總結一下，自己在完成實驗過程中的總結的幾個剛接觸 ...

　　Jsoup實戰爬取（京東手機數據） 　　相關依賴和配置說明已經在上一篇隨筆中交代：https://www.cnblogs.com/heiyang/p/12199113.html 　　新建關於手 ...

　　Java連接hive簡單操作 　　首先在使用java連接前我們需要在虛擬機上開啟hiveserver2（hiveserver2需要安裝），hiveserve2的作用是實現hive可以進行並發操作 ...

報錯：Exception in thread "main" java.lang.VerifyError: class scala.collection.mutable.WrappedArray ove ...

二、編寫獨立應用程序實現數據去重 對於兩個輸入文件A和B，編寫spark獨立應用程序。對兩個文件進行合並，並剔除其中重復的內容。 輸入文件A的樣例如下：20170101 x20170102 y20 ...

個人學期總結及寒假學習規划 一：個人學期總結 1大一前期專業學習問題 總結和回顧個人過去的大學學習時光，猛然間發現其實自己在大一對於專業學習方面只能算是一個入門，很多專業知識和技能的掌握都不是很理解和精通，基礎性語言雖然都已學習但是總的來說，感覺自己好像都略知一二 ...