namenode?
hdfs - - config $HADOOP_DIRECT namenode
При её запуске консоль пропадает бл.. Не посмотреть ничего.. В фоновый Ctrl+Z отправляю и +Stop..
Дичь какая-то
Оберни в сервис systemctl
А нужно это, чтоб переопределить диру, где конфиги лежат. Кому-то это видимо нужно (для экспериментов)
А это в докере. Ту да же +Zeppelin и 2 гига почти он весит. В нём нет SytremD. Пробовал ставить Sysremd, установилось, но не отрабатывает.
Да, sustemd не работает в докере. Можно попробовать просто скрипт написать, который будет отцепляться от консоли и консольный лог редиректить в файл. Тогда таких проблем не будет
Там тот же.. /conf где конфиги лежат итуказан. Почему-то не стартует Hadoop скриптом, который в докере был (там что-то своё у создателя докера hdfs+namenode. Просто так запустил start-all.sh и работает).
Ну если работает, то зачем что-то трогать) Ты какую задачу решить пытаешься? Начнем с этого
хадупы ванильные в докерах есть у них: https://github.com/big-data-europe можете посмотреть, как они сделали
Выяснить почему zombie 🧟♂🧟🧟♀ процессы интерпритатора spark под уз zeppelin появляются на боевом SmallData
Я имел ввиду запуском hdfs —config
А я 1:1 взял из docker hub hadoop277
А там скрипт run.sh в докере, по идее он при сборке в CMD указан, должен стартовать при запуске docker. Короче при - - conf namenode... Нэймнода стартует, но к консоли bash доступ пропадает
попробуй в конце команды поставить &, потом выполни bg
Ок.. Спс - попробую! Только не понимаю почему ui localhost:8088 не работает.. А namenoda без hdfs не работает жж
Ну известно почему - надо смотреть логи, процессы и совершать прочие приседания
Обсуждают сегодня