В общем в тупике, сделал консольную функцию для поиска и

Question

В общем в тупике, сделал консольную функцию для поиска и

удалении дублей в 2 табличках. Записей примерно 2 000 000 в каждой, уже час фигачит только 3%. Какие есть варианты ускорения?

#octobercms #russian #software

0

03.06.2023

8 ответов

7 просмотров

Vladimir 

Не могу скрин глянуть. Обычно для дублей используют group by + having. При поиске в двух табличках можно использовать еще join + group by + having. Что-то вроде select id from table group by parent having count(*) > 1

0

11 месяцев назад

Денис Александрович Автор вопроса

Vladimir 
Не могу скрин глянуть. Обычно для дублей использую...

На sql всегда перейти смогу, через модельки хочется. Или без шансов?

0

11 месяцев назад

Vladimir 

Денис Александрович
На sql всегда перейти смогу, через модельки хочетс...

Можешь собрать запрос и результат рассортировать по моделям.

0

11 месяцев назад

Vladimir 

Только загрузилась картинка. Да. Получи запросом сразу модели дубликаты. Merchant::select(\DB::raw(‘min(id) as id’), ‘name’, ‘mcc’)->groupBy(‘name’, ‘mcc’)->having(\DB::raw(‘count(id)’), ‘>’, 1)->get() Должно вернуть модели с минимальным id среди дублей, если найдено больше 1 записи по группировке name,mcc

0

11 месяцев назад

Денис Александрович Автор вопроса

Vladimir 
Только загрузилась картинка. Да. Получи запросом с...

Ну чутка быстрее но не сильно

0

11 месяцев назад

Vladimir 

Денис Александрович
Ну чутка быстрее но не сильно

Используй ленивые коллекции.

0

11 месяцев назад