Я смотрю на функцию слайда окна для Spark DataFrame в Spark SQL, Scala.
У меня есть dataframe с столбцами Col1, Col1, Col1, date.
Col1 Col2 Col3 date volume new_col
201601 100.5
201602 120.6 100.5
201603 450.2 120.6
201604 200.7 450.2
201605 121.4 200.7`
Теперь я хочу добавить новый столбец с именем (new_col) с одной строкой, как показано выше.
Я попытался использовать параметр ниже, чтобы использовать функцию окна.
val windSldBrdrxNrx_df = df.withColumn("Prev_brand_rx", lag("Prev_brand_rx",1))
Кто-нибудь может помочь мне, как это сделать.