Товарищи, могу ли я как-то партиционировать следующую структуру папок в

Question

Товарищи, могу ли я как-то партиционировать следующую структуру папок в

S3 для Афины

aws s3 ls s3://xxxx-s3-iot-datalake-yyy/sparkplug/2022/09/
PRE 01/
PRE 02/
PRE 03/
....
и так далее
или нужно менять её на:

PRE month=01/
PRE month=02/
PRE month=03/
...
штоп в последствии добавить PARTITIONED BY (month int)?

#aws #database #russian #software

0

19.09.2022

1 ответов

29 просмотров

Vasiliy Angapov · Accepted Answer

Vasiliy Angapov

Я вот так делал: PARTITIONED BY ( day string ) TBLPROPERTIES ( 'projection.enabled' = 'true', 'projection.day.format' = 'yyyy/MM/dd', 'projection.day.interval' = '1', 'projection.day.interval.unit' = 'DAYS', 'projection.day.range' = '2022/01/01,NOW', 'projection.day.type' = 'date’, 'storage.location.template' = 's3://mybucket/${day}' )

0

20.09.2022

61 похожих чатов

Товарищи, могу ли я как-то партиционировать следующую структуру папок в

1 ответов

Похожие вопросы