с этим приложением в режиме кластера.
Внутри этого скала приложения с помощью библиотеки sys.process я хочу выполнить команду:
./bin/spark-submit \
--master yarn \
--deploy-mode cluster \
wordByExample.py
Получится ли у меня провернуть такой трюк?
Вы наверное скажете: что я творю?
Но я творец, я так вижу =)
Ну ты попробуй и отпишись
Да, можно. Кейтаб только ещё нужно будет передавать в ключе для spark-submit
Обсуждают сегодня