Наверное не получать 50к записей за раз?

22 ответов

6 просмотров

да это раз в сутки для пересчета, на джаве драйвере все ок отрабатывает

разве это какая-то проблема может быть? это же мало

dnacd 🦜
интересно просто

например процедура, которая пару миллионов строк перекладывает из монго куда-нибудь 5 раз в день

Константин Шапран
например процедура, которая пару миллионов строк п...

так лучше всё равно порционно это делать, а не всё сразу

dnacd 🦜
так лучше всё равно порционно это делать, а не всё...

это единственный способ, т.к. иначе все 2млн будут в памяти, а это мало какая память переживет

Константин Шапран
это единственный способ, т.к. иначе все 2млн будут...

ну вот. тогда и вопрос, зачем сразу 50к записей, если для пересчёта всех записей, то существуют другие методы, чем вытаскивать с бд 50к записей просто так

dnacd 🦜
ну вот. тогда и вопрос, зачем сразу 50к записей, ...

50к это мало. что значит другие методы, кроме как вытаскивать данные из бд?)

Константин Шапран
50к это мало. что значит другие методы, кроме как ...

ну для пересчета существует db.collection.count если я правильно понял слово "пересчёт"

dnacd 🦜
ну для пересчета существует db.collection.count ес...

где я его использовал?) для получения кол-ва строк конечно тупо все строки качать

Константин Шапран
где я его использовал?) для получения кол-ва строк...

не ты, просто человек выше сказал, что ему надо 50к записей для пересчета раз в день, вот я и интересуюсь ибо сам в монге новоиспечённый +- )

dnacd 🦜
не ты, просто человек выше сказал, что ему надо 50...

конечно тут не имелось ввиду получать кол-во записей))

Константин Шапран
где я его использовал?) для получения кол-ва строк...

не для подсчета количества, там ещё js код который их обрабатывает, для пересчета я бы count юзал) но вот проблема что count тоже 1к возвращает)

Nick
Проверяйте условие выборки

да первым делом проверил, все ок

Антон
screenshot да первым делом проверил, все ок

Так каунт значит нормально возвращает. Остается только то как обходите результат в цикле

Nick
Так каунт значит нормально возвращает. Остается то...

это скрин с драйвера на джаве, там все ок, а если через нативный на js то максимум 1к

Антон
это скрин с драйвера на джаве, там все ок, а если ...

Тогда не путайте, на лицо то что условия разные или базы разные. Уберите условие выборки и оставьте просто find() и проверьте будет ли проблема

Nick
Тогда не путайте, на лицо то что условия разные ил...

блин сорян) оказалось что в env другая бд была) проверил на основной все окей) 5сек для выборки и подсчета

Похожие вопросы

Обсуждают сегодня

Привет. Наверняка у кого-нибудь здесь есть опыт работы с трекерами (встроенными в OpenCV (KCF) или абстрагированными) на одноплатниках. Если не рассматривать малинку и други...
Georgy Makarov
4
Всем привет, Добавил в плагин определение user agent public function registerMarkupTags() { return [ 'filters' => [ 'staticPage' => ['RainLab\Pages\Cl...
John Norton Kruger
3
И всё-таки спрошу насчет такого вариант, сомнительно или нет? (Windows стоять не будет)
Georgy Makarov
5
Приветствую. Есть N видео объектов (фильмы). Часть полной длины просмотра а часть короткие ( обрезаны титры). Задача найти идентичные фильмы. Я не в курсе, есть ли аналог шаз...
Nikolay Chudinov
7
Я колись ставив гуглу антиспам 3.0, може і норм, але мені не дуже зайшло. Теж думав тиждень, що його і куди. Зупинився на трех варіантах відразу всі три і включив 1. Перевір...
𝓔𝓾𝓰𝓮𝓷𝓮𝓥 J
2
https://youtu.be/d8Jx6zO1yw0?si=AvWkrBe-RS3FAlWX Компилировал с CUDA по этому гайду, единственно моменты: 1) С VS 2022 работает, нужно только что бы была установлена среда C...
Denis
3
Кто знает как подружить Gstreamer с OpenCV? Вот такой пайплайн я шлю с гстримера но OpenCV + python у меня никак не получается его воспроизвести "gst-launch-1.0 nvarguscameras...
Artem
3
Кастомные эмодзи для ботов доступны только элите, верно?
山 | Bobby | 山
3
Как потом сделать чтобы питон видел нахождение скомпилированных файлов? Я через системные переменные пробовал указать расположение но не помогло
Artem
5
Всем привет! Подскажите пожалуйста С помощью OpenCv "смотрю" rstp поток, но там валятся ошибка типа [hevc @ 000001e4e2292ac0] Could not find ref with POC 7 Перерыл инет...
Evgeniy
1
Карта сайта