Windows環(huán)境下的安裝部署步驟 https://moon-rui.github.io/2018/11/26/spark_on_windows.html
2018-11-26
rdd1.union(rdd2).foreach(println)
感覺這樣寫更簡單 = - =
感覺這樣寫更簡單 = - =
2018-09-11
非常感謝老師
老師的課程應(yīng)該都是基于官方文檔, 但是官方文檔有些部分很難理解, 而且不容易記住, 有了這次上課的經(jīng)歷作為基礎(chǔ), 我會去看官方文檔, 這樣會更加深入的學(xué)下去。
再次感謝老師!
老師的課程應(yīng)該都是基于官方文檔, 但是官方文檔有些部分很難理解, 而且不容易記住, 有了這次上課的經(jīng)歷作為基礎(chǔ), 我會去看官方文檔, 這樣會更加深入的學(xué)下去。
再次感謝老師!
2018-08-18
##匯總出科目的數(shù)量和個人總成績:
##第一次遇到key=jake或者key=mike時,執(zhí)行:score=>(1,score),初始化:科目總數(shù)為1,總成績?yōu)榈谝粋€科目的成績;
##之后再遇到key=jake或者key=mike時,執(zhí)行:(c1:(Int,Double),newScore)=>(c1._1+1,c1._2+newScore),科目數(shù)加1,總成績加上本次科目成績;
##合并所有partition上面的科目數(shù)和成績:(c1:(Int,Double),c2:(Int,Double))=>(c1._1+c2._1,c1._2+c2._2)
##第一次遇到key=jake或者key=mike時,執(zhí)行:score=>(1,score),初始化:科目總數(shù)為1,總成績?yōu)榈谝粋€科目的成績;
##之后再遇到key=jake或者key=mike時,執(zhí)行:(c1:(Int,Double),newScore)=>(c1._1+1,c1._2+newScore),科目數(shù)加1,總成績加上本次科目成績;
##合并所有partition上面的科目數(shù)和成績:(c1:(Int,Double),c2:(Int,Double))=>(c1._1+c2._1,c1._2+c2._2)
2018-08-13