第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定
已解決430363個(gè)問題,去搜搜看,總會(huì)有你想問的

我無法用spark編寫orc文件

我無法用spark編寫orc文件

GCT1015 2023-08-09 16:05:36
我正在嘗試向獸人寫入數(shù)據(jù)幀,但無濟(jì)于事。我正在使用 Spark 1.6 和 Java。我在本地計(jì)算機(jī)上運(yùn)行,我嘗試安裝一些依賴項(xiàng)但沒有成功。我有一個(gè)工作火花,我想將其寫入 orc 文件,但此錯(cuò)誤返回給我:Exception in thread "main" java.lang.ClassNotFoundException: Failed to find data source: orc. Please find packages at http://spark-packages.org    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$.lookupDataSource(ResolvedDataSource.scala:77)    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$.apply(ResolvedDataSource.scala:219)    at org.apache.spark.sql.DataFrameWriter.save(DataFrameWriter.scala:148)    at org.apache.spark.sql.DataFrameWriter.save(DataFrameWriter.scala:139)    at Confiaveis.main(Confiaveis.java:96)Caused by: java.lang.ClassNotFoundException: orc.DefaultSource    at java.net.URLClassLoader.findClass(URLClassLoader.java:382)    at java.lang.ClassLoader.loadClass(ClassLoader.java:424)    at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:349)    at java.lang.ClassLoader.loadClass(ClassLoader.java:357)    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$$anonfun$4$$anonfun$apply$1.apply(ResolvedDataSource.scala:62)    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$$anonfun$4$$anonfun$apply$1.apply(ResolvedDataSource.scala:62)    at scala.util.Try$.apply(Try.scala:192)    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$$anonfun$4.apply(ResolvedDataSource.scala:62)    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$$anonfun$4.apply(ResolvedDataSource.scala:62)    at scala.util.Try.orElse(Try.scala:84)    at org.apache.spark.sql.execution.datasources.ResolvedDataSource$.lookupDataSource(ResolvedDataSource.scala:62)    ... 4 more我用這個(gè)命令來寫:df.write().mode("append").format("orc").save("path");有誰知道我該如何解決這個(gè)問題?據(jù)我對(duì) Spark 的了解,我知道這是他找不到的圖書館,但我找不到任何地方來澄清該圖書館是什么。
查看完整描述

1 回答

?
月關(guān)寶盒

TA貢獻(xiàn)1772條經(jīng)驗(yàn) 獲得超5個(gè)贊

嘗試


<dependency>

    <groupId>org.apache.spark</groupId>

    <artifactId>spark-hive_*your_version*</artifactId>

    <version>*your_version*</version>

    <scope>provided</scope>

</dependency>


查看完整回答
反對(duì) 回復(fù) 2023-08-09
  • 1 回答
  • 0 關(guān)注
  • 124 瀏覽

添加回答

舉報(bào)

0/150
提交
取消
微信客服

購課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)