вопрос по датабриксу. В оф документации написано что пути под managed таблицами чистятся сами автоматически. Я вот сейчас смотрю на свой сторедж и нифига они не чистятся. Мб к...
есть вопрос народ: кто-нибудь собирает логи с кластеров спарка?
Всем привет. А может кто знает как в спарке вернуть ошибку из jvm в питон? То бишь есть try except Exception e, и вот пикл не может скушать ошибку возвращаемую из jvm как я по...
В день в час или это в общем?
К слову сделал я Мердж на дельта таблицу размером в 150гб(сама таблица сильно меньше очевидно из-за сжатия, но json-ов я туда сложил столько), выполнилось за 7 минут на класте...
А знает кто как подписаться на рассылку датабрикса о новых апдейтах?
То есть сначала спарком в паркеты и потом процедура с инсерт Инто?
А что если продуктов два с одинаковой длиной?
лучше чем дельта?
А как вы юзаете эти логи?