их запускается одновременно?
mapper делал вставку в удаленный clickhouse через jdbc, batch insert'ами. Батчи были примерно по 100к записей. Один батч - одна map таска. Со "сколько их запускается одновременно" - проблема. Я не нашел способа ограничить количество одновременно работающих map тасок на уровне одной джобы. Только целиком для кластера. А это мешало бы другим джобам.
Обсуждают сегодня