hive больше не нужен?
https://iceberg.apache.org/docs/latest/spark-configuration/
Метастор надо сделать в любом случае
Метастор для меня это просто база mysql? Я не понимаю зачем тянуть сервис hive?
Внутри спарка есть класс хайва, который коннектится
Здесь настройки - по трифту к уже поднятому хайв метастор сервисв
Я юзал хадуп каталог, потому что у нас не было версии хайв метастора, которая дружила бы с айсбергом, а новую раскатывать не стал. Работало, но юзать было неудобно. Но это сто лет назад было.
Обсуждают сегодня