花費 49 ms
Kafka配置說明

Broker Configs Property Default Description broker.id ...

Thu Apr 14 23:53:00 CST 2016 3 55956
Scala(一)——scala+Idea環境配置

Java虛擬機的確是很強大,有很多計算機語言可以運行在虛擬機上,完善了虛擬機上多語言編程。 近年來,大數據雲計算,大數據的火爆也讓一些小眾語言火了起來,如Python,Scala等。這些語言編寫簡單 ...

Wed Jun 13 07:25:00 CST 2018 2 27758
Scala 中的foreach和map方法比較

Scala中的集合對象都有foreach和map兩個方法。兩個方法的共同點在於:都是用於遍歷集合對象,並對每一項執行指定的方法。而兩者的差異在於:foreach無返回值(准確說返回void),map返 ...

Fri Aug 07 21:52:00 CST 2015 0 43836
Spark Rdd coalesce()方法和repartition()方法

在Spark的Rdd中,Rdd是分區的。 有時候需要重新設置Rdd的分區數量,比如Rdd的分區中,Rdd分區比較多,但是每個Rdd的數據量比較小,需要設置一個比較合理的分區。或者需要把Rdd的分區數 ...

Fri Apr 15 19:20:00 CST 2016 0 33632
Spark:DataFrame 寫入文本文件

將DataFrame寫成文件方法有很多最簡單的將DataFrame轉換成RDD,通過saveASTextFile進行保存但是這個方法存在一些局限性:1.將DataFrame轉換成RDD或導致數據結構的 ...

Wed Oct 17 00:05:00 CST 2018 0 13922
使用Flink時遇到的問題(不斷更新中)

1.啟動不起來 查看JobManager日志: 解決方案:/etc/hosts中配置的主機名都是小寫,但是在Flink配置文件(flink-config.yaml、masters、 ...

Sun Sep 17 06:13:00 CST 2017 1 20391
Scala 隱式(implicit)詳解

文章正文 通過隱式轉換,程序員可以在編寫Scala程序時故意漏掉一些信息,讓編譯器去嘗試在編譯期間自動推導出這些信息來,這種特性可以極大的減少代碼量,忽略那些冗長,過於細節的代碼。 1、Spark ...

Mon Apr 09 00:47:00 CST 2018 3 14465

 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM