при ООМ. Как это правильно настроить, чтобы этот дамп сохранился в постоянной локации, а не помер с экзекьютором? На yarn кластере
именно executor дамп ? мы на драйвер сохраняем ...
Да, экзекьютор. А как вы его на драйвер сохраняете? В смысле прямо руками или есть просто какие-то Спарк конфы для этого?
в смысле что если драйвер упадет с OOM, вот тогда мы сораняем
Обсуждают сегодня