Доброго времени суток, вопрос: правильно ли я понимаю, что для AWS

Athena partition нужно каждый раз добавлять partition, как только добавилась инфа?

пример:
s3://CLOUDTRAILBUCKET/AWSLogs/ACCOUNTNUMBER/CloudTrail/${region}/${year}/${month}/${day}

и получается при создании новой ${day} директории, нужно обновить partition для таблицы Athena?

4 ответов

8 просмотров

Вот недавно смотрел видосик по разбору crawler и получается что да, если не нужно менять метаданные, в настройках поставить галку обновить партии

saint Mephistopheles- Автор вопроса
Chern Oleksander
Вот недавно смотрел видосик по разбору crawler и п...

буду благодарен если поделитесь сорсом на норм видос

saint Mephistopheles
буду благодарен если поделитесь сорсом на норм вид...

Ссылки запрещены, How to Use Glue Crawlers Efficiently to Build Your Data Lake Quickly - AWS Online Tech Talks в ютубе. В целом AWS Online Tech Talks прикольный канал

Похожие вопросы

Обсуждают сегодня

Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Объясните, пожалуйста, почему компилятор ругается на использование в условии неинициализированной переменной: int x; Task.Run(async () => { x = await somefunc(); }).Wait...
Александр
5
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
1. https://www.kaggle.com/code/ahmadrezagholami2001/housing-estimation-linear-regression 2. https://www.kaggle.com/code/ahmadrezagholami2001/uncovering-quality-in-wines-logis...
Ahmadreza
1
Блин, ребята, сори за тупые вопросы. А можно ли как-то открыть вебапку по нажатию на кнопку в меню(которое появляется слева, команды)?
Artem Stormageddon
3
а плаксы из-под питона умеют только в комфортных условиях что-то выдавить из себя?)
Lencore
9
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
Коллеги, может знает кто, можно ли цвет бейджа счётчика в BackendMenu менять без бубнов?
Alex Blaze
3
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Карта сайта