我有如下數(shù)據(jù)框并使用 pyspark 2.4Name dojkevin 08/15/2013George 06/21/2014df.printSchema() -- Name (String) -- dob (String)我想將 doj 轉(zhuǎn)換為 YYYY-MM-DD 格式，并確保我需要使用 pyspark 將 doj 轉(zhuǎn)換為 Datetype 而不是 String。有沒有可用的特定函數(shù)？感謝您的回復(fù)
2 回答
米琪卡哇伊
TA貢獻1998條經(jīng)驗 獲得超6個贊
使用to_date()功能。
df.show()
#+------+----------+
#| Name| doj|
#+------+----------+
#| Kevin|08/15/2013|
#|George|06/21/2014|
#+------+----------+
from pyspark.sql.functions import *
df.withColumn("doj",to_date(col("doj"),'MM/dd/yyyy')).show()
#+------+----------+
#| Name| doj|
#+------+----------+
#| Kevin|2013-08-15|
#|George|2014-06-21|
#+------+----------+
df.withColumn("doj",to_date(col("doj"),'MM/dd/yyyy')).printSchema()
#root
# |-- Name: string (nullable = true)
# |-- doj: date (nullable = true)
尚方寶劍之說
TA貢獻1788條經(jīng)驗 獲得超4個贊
def dateconv(x):
if x == None:
x = 'null'
return x
else:
return x.strftime('%Y-%M-%D')
dateconv(doj)
python 中有類似的東西，我這樣做了
添加回答
舉報
0/150
提交
取消