我正在寫(xiě)一個(gè)火花作業(yè),它需要在本地以及在Databricks上都可以運(yùn)行。在每個(gè)環(huán)境(文件路徑)中,代碼必須略有不同,因此我試圖找到一種方法來(lái)檢測(cè)作業(yè)是否在Databricks中運(yùn)行。到目前為止,我發(fā)現(xiàn)的最好方法是在根目錄中查找“ dbfs”目錄,如果存在,則假定它在Databricks上運(yùn)行。這感覺(jué)不像是正確的解決方案。有誰(shuí)有更好的主意嗎?
如何以編程方式檢測(cè)Databricks環(huán)境
慕田峪9158850
2021-05-14 18:17:50