170 похожих чатов

Всем привет! Есть очень большая таблица, делаю экспорт данных из неё.

Экспорт идёт по айдишкам внешнего ключа, которые приходят с фронта, их может быть как пару десятков так и пару десятков тысяч. Подскажите как лучше сделать c точки зрения обработки больших запросов?:
rows = ModelName.objects.filter(fk_id__in=fk_ids)
for row in rows.iterator():
...операции с row...
Или:
rows_ids = ModelName.objects.filter(fk_id__in=fk_ids).values_list('id, flat=True)
for row_id in rows_ids:
row = ModelName.objects.get(id=row_id)
...операции с row...
Или вообще как-то иначе?

4 ответов

8 просмотров

в обоих случаях получишь кол-во запросов >= кол-ву ИДшников бери по частям (например макс. по 100) и в виде словарей

Sergey-Matveyev Автор вопроса

Это то, что называется chunks?

https://stackoverflow.com/a/42082013

Sergey-Matveyev Автор вопроса

Спасибо большое!

Похожие вопросы

Обсуждают сегодня

А как старый хаскел с новым стыковать ? потому как тут работает https://play.haskell.org/saved/C3xpMzcd, а вот тут https://stepik.org/lesson/7602/step/9?unit=1473 нет ошибка C...
Fedor
131
Вопрос я правильно понимаю что в коде newtype ArrowMap k v = ArrowMap { getArrowMap :: k -> Maybe v } getArrowMap есть функция типа k -> Maybe v, если да, то не понимаю задач...
Fedor
64
что насчет пагинга? на осдеве непонятно(
Vi Chapmann 🪙
26
Народ, кто шарит в расширенных разделах (EBR/EPR) на дисках с разметками MBR? Везде пишут (в вики рус/англ) в частности + другие источники смотрел, что первый сектор расширенн...
Eugene Krasnikov (ᴊɪɴ x)
1
Как Вы считаете нормально ли в двадцатых годах 21 века в ВУЗах Российской Федерации обучать студентов работе с TASM? Не слишком ли это "архаично"? (Если оффтоп или флейм для э...
Spiker01
52
Ребят, что лучше для реверса: гидра или ида?
En Vind Av Sorg
26
Делаю велосипед логгер. К сообщению хочу прикрутить некоторую информацию, типа, кем отправлено, какой уровень, и всякое такое. И тут подумалось мне, почему бы не хранить весь...
Serjone
24
Привет. Кто-нибудь знает, как это называется? Или как этот препроцессор найти, не получается запрос адекватно сформулировать
Савеλий
6
помогите решить вопрос ктото решал это?
Михаил Helper
9
Комрады, хотел уточнить. Проперть в OnDestroy юнита-хозяина по-прежнему доступна? И еще уточнение: finalization юнита наступает раньше или позже OnDestroy?
Ed Doc
48
Карта сайта