第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定
已解決430363個(gè)問(wèn)題,去搜搜看,總會(huì)有你想問(wèn)的

從字符串 PySpark 中獲取年、月、日

從字符串 PySpark 中獲取年、月、日

動(dòng)漫人物 2023-12-05 15:53:17
我需要Year, Month, Day, Hour從 Spark df 中的列中獲取字符串Time。我還需要將這些值保存在單獨(dú)的列中。數(shù)據(jù)如下:ID               Time111            2020-03-23-12:40:04112            2020-04-23-12:40:04113            2020-05-23-12:40:04期望的輸出是:ID        Year        Month        Day111     2020         03            23112     2020         04            23113     2020         05            23我試過(guò):data_df.select(    year("Time").alias('year'),     month("Time").alias('month'),     dayofmonth("Time").alias('day')).show()它返回所有 Null 值。
查看完整描述

1 回答

?
UYOU

TA貢獻(xiàn)1878條經(jīng)驗(yàn) 獲得超4個(gè)贊

我假設(shè)該Time列是一個(gè)字符串。您可以使用正則表達(dá)式提取所需的值,但這會(huì)非常痛苦。另一種選擇是將字符串轉(zhuǎn)換為時(shí)間戳,然后使用函數(shù)等year。month


另外,您的時(shí)間戳不是標(biāo)準(zhǔn)格式,因此您需要指定它。


data = [(111, '2020-03-23-12:40:04'),

        (112, '2020-04-23-12:40:04'),

        (113, '2020-05-23-12:40:04')]

df = spark.createDataFrame(data, ['ID', 'Time'])


df\

    .withColumn('t', F.to_timestamp('Time', 'yyyy-MM-dd-HH:mm:ss'))\

    .select('ID',

            F.year('t').alias('year'),

            F.month('t').alias('month'),

            F.dayofmonth('t').alias('day'),

            F.hour('t').alias('hour')

    ).show()

產(chǎn)生:


+---+----+-----+---+----+

| ID|year|month|day|hour|

+---+----+-----+---+----+

|111|2020|    3| 23|  12|

|112|2020|    4| 23|  12|

|113|2020|    5| 23|  12|

+---+----+-----+---+----+



查看完整回答
反對(duì) 回復(fù) 2023-12-05
  • 1 回答
  • 0 關(guān)注
  • 192 瀏覽
慕課專(zhuān)欄
更多

添加回答

舉報(bào)

0/150
提交
取消
微信客服

購(gòu)課補(bǔ)貼
聯(lián)系客服咨詢(xún)優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)