apach spark в кубере?
суть пробелмы:
- есть сервис в кубере
- есть кластер apach Spark от Bitnami
Все по отдельности работают, даже в морде спарка видны воркер и само приложение, которое зарегистрировалось, т.е. в коммуникациях проблем нет.
Но есть проблема обратного доступа. Для каких-то нужд worker ломится к сервису и получает отлуп, так как ломится по имени пода. Хотя, полагаю, должен ломиться по адресу службы.
и получает ошибку
java.io.IOException: Failed to connect to etl-back-uniloader-55f7dccdb-gdhd5:35904
Caused by: java.net.UnknownHostException: etl-back-uniloader-55f7dccdb-gdhd5
Может кто сталкивался? наведите на направления поиска причины, пожалуйста
вероятно нужен headles сервис, чтобы он мог ломиться по pod-name.serviceName
Имя пода тоже вполне себе валидный днс, разве нет ?
Да, возможно следовало бы уточнить сразу. В поде крутятся 2 контейнера.
Это не важно ) они по 127.0.0.1 взаимодействуют
изи. Спарк в том же кубере?
Гы
Обсуждают сегодня