有什么技術(shù)原因?qū)е聅park 2.3無(wú)法與java 1.10一起使用(截至2018年7月)?這是當(dāng)我使用運(yùn)行SparkPi示例時(shí)的輸出spark-submit。我通過(guò)切換到Java8而不是這里提到的Java10來(lái)解決了這個(gè)問(wèn)題。
3 回答

當(dāng)年話下
TA貢獻(xiàn)1890條經(jīng)驗(yàn) 獲得超9個(gè)贊
通勤者在這里。支持Java 9+實(shí)際上是一項(xiàng)相當(dāng)大的工作:SPARK-24417
它也差不多完成了,應(yīng)該為Spark 3.0做好準(zhǔn)備,它應(yīng)該可以在Java 8到11以及更高版本上運(yùn)行。
目的(我的目的)是在不打開模塊訪問(wèn)權(quán)限的情況下使其正常工作。關(guān)鍵問(wèn)題包括:
sun.misc.Unsafe
用法必須刪除或解決引導(dǎo)類加載器的結(jié)構(gòu)更改
Scala對(duì)Java 9+的支持
大量依賴關(guān)系更新可與Java 9+一起使用
JAXB不再自動(dòng)可用
添加回答
舉報(bào)
0/150
提交
取消