по планам на добавление поддержки афинити k8s нод? хочется алоцировать ресурсы на тейнтнутых нодах
На каких нодах? Немного не понял что подразумевается под "тейтнутые ноды"
хочется пускать спарк на нодах на которых taint есть кубовый; спарк так не умеет и в доках только ноушн о том что в будущих релизах он научится с тейнтом / аффинити работать. жира тикет я нашел только старый, который дизайн док https://issues.apache.org/jira/browse/SPARK-24353. фолуап тикетов не нашел вот и спросил
да типо более сложных селекторов нод
Спарк оператор умеет https://github.com/GoogleCloudPlatform/spark-on-k8s-operator/issues/890 Там же и некоторые ссылки на спарк джиру
хз ток зачем он мне
Мы через оператор делали, оч удобно
да мне над сессию из ноутбука)
Кстати, с есть ли какое-то стандартное средство, как запустить скрипт в SparkOperator'е ещё разок, запуском-по-по требованию?
Обсуждают сегодня