пожалуйсьта, как получить объект String из Column?
Есть Dataset<Row> считанный из источника.
Я добавляю колонку, и хочу на основании одной из колонок типа String добавить значение.
dataset.whithColumn("NEW_COL", myStringFunction(col("SOME_COL));
Имеется функция
static Column myStringFunction(Column some) {
String str = ???? как получить объект String
... несколько хитрых преобразований
return lit(str);
}
Буду рад хорошему совету))))
Нехитрые преобразования уже реализованы в spark.sql.functions
https://stackoverflow.com/a/42383836/4749413
Обсуждают сегодня