Нужно нагенерировать в бд ~30^6 уникальных комбинаций из этих слов в таблицу comb
БД PGSQL, но мы можем взять любую если нужно
Как мы решали:
Создавали таблицу без индексов, а индексы ставили потом.
1. Написали функцию которая брала. например первые 4 комбинации и генерировала .
16 одновременно дабы в 16 потоков. долго
2. В несколько потоков генерировали ЯП. очень долго
3. Фунцией генерировали в рам таблицу и уже раз в пару часов переносили в нормальную.
Если еще идеи как ускорить ? или сменить бд может быть?
Если что пробовали на сервере с 96 гб рам и ксеоном с 16 потоками.
Генерить яп и писать батчами
нельзя просто нагенерировать в csv и потом через импорт импортировать? можно блоками
Обсуждают сегодня