Искры sql (1.4): Получить текущую временную метку

Question

Я знаю, что есть функция current_timestamp в Spark 1.5 & выше, но мы все еще на 1.4. Как добавить столбец в DataFrame, который установлен на «текущую временную метку»?

df.withColumn("date_inserted", ????) 

Answer 1

Простая временная метка буквальным должен сделать трюк:

df.withColumn(
    "date_inserted", 
    lit(java.sql.Timestamp.from(java.time.Instant.now)))