我正在嘗試有效地連接兩個DataFrame，其中一個較大，而第二個較小。有辦法避免所有這些改組嗎？我無法設(shè)置autoBroadCastJoinThreshold，因?yàn)樗鼉H支持Integers-并且我要廣播的表略大于整數(shù)字節(jié)。有沒有辦法強(qiáng)制廣播忽略此變量？
3 回答
呼啦一陣風(fēng)
TA貢獻(xiàn)1802條經(jīng)驗(yàn) 獲得超6個贊
您可以通過以下方式暗示要廣播的數(shù)據(jù)幀 left.join(broadcast(right), ...)
- 3 回答
- 0 關(guān)注
- 796 瀏覽
添加回答
舉報(bào)
0/150
提交
取消