第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定
已解決430363個(gè)問(wèn)題,去搜搜看,總會(huì)有你想問(wèn)的

如何在IPython Notebook中加載jar依賴項(xiàng)

如何在IPython Notebook中加載jar依賴項(xiàng)

如何在IPython Notebook中加載jar依賴項(xiàng)這個(gè)頁(yè)面鼓勵(lì)我嘗試使用spark-csv在PySpark中讀取.csv文件我發(fā)現(xiàn)了一些帖子,比如這個(gè)描述如何使用spark-csv但我無(wú)法通過(guò)在啟動(dòng)時(shí)包含.jar文件或包擴(kuò)展來(lái)初始化ipython實(shí)例,這可以通過(guò)spark-shell完成。也就是說(shuō),而不是ipython notebook --profile=pyspark我試過(guò)了ipython notebook --profile=pyspark --packages com.databricks:spark-csv_2.10:1.0.3但它不受支持。請(qǐng)指教。
查看完整描述

3 回答

?
小怪獸愛(ài)吃肉

TA貢獻(xiàn)1852條經(jīng)驗(yàn) 獲得超1個(gè)贊

您可以簡(jiǎn)單地將其傳遞給PYSPARK_SUBMIT_ARGS變量。例如:

export PACKAGES="com.databricks:spark-csv_2.11:1.3.0"export PYSPARK_SUBMIT_ARGS="--packages ${PACKAGES} pyspark-shell"

SparkContextSparkSession和相應(yīng)的JVM啟動(dòng)之前,還可以在代碼中動(dòng)態(tài)設(shè)置這些屬性:

packages = "com.databricks:spark-csv_2.11:1.3.0"os.environ["PYSPARK_SUBMIT_ARGS"] = (
    "--packages {0} pyspark-shell".format(packages))


查看完整回答
反對(duì) 回復(fù) 2019-08-28
  • 3 回答
  • 0 關(guān)注
  • 751 瀏覽
慕課專欄
更多

添加回答

舉報(bào)

0/150
提交
取消
微信客服

購(gòu)課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)