170 похожих чатов

У меня вот такой вопрос коллеги. Есть клиентская аппликуха. Её

задача - скачать в параллель из удалённой MongoDB(причём с нескольких серверов replicaset-а) как можно больше данных (не суть каких) и запихнуть в себя неким образом обработав (не суть как, но обработка ресурсоёмка). Я разделил логику многопоточного засасывания (запросов) данных из MongoDB и логику обработки. И число потоков обработки сделал равным числу cores CPU. А вот как выбирать число потоков для запроса MongoDB? Моделирование показывает, что на одних машинах оптимум 14 потоков, на других 20. Это неким образом коррелирует (вероятно) с локально сетевой инфраструктурой... Но как выбрать число потоков на скачивание также просто как Environment.ProcessorCount для обработки? Может какие идеи есть?

1 ответов

4 просмотра

Тут зависит от ширины канала до монги, и от того, сколько твоя монга может отдавать одновременно

Похожие вопросы

Обсуждают сегодня

Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
75
База данных не поможет. Шифрование не поможет. Какие там ещё варианты? Накидывайте.
КТ315
20
А табстоп это сообщение от окна или от элемента управления?
The Bird of Hermes
18
А как лучше конвертировать физический адрес в виртуальный при маппинге? В случае ядра у меня, например, direct mapping, первые 768МБ я как есть мапплю в higher half, а остальн...
Evg Resh
26
Открыл свой двухкилобайтный экзешник в x32dbg, а тут какая-то хрень. Смущает кнопка "выполнить до пользовательского кода", а что ещё может быть в файле помимо него ?
НѣкъиⰘижєжєиꙁъвьсєсвѣтьноѣсѣтиѥсть•
11
Мне были интересны дишные хаки и я нашёл любопытный способ на форуме через __traits, что-то вроде int delegate(int) fac = (int n) => n == 0 ? 1 : n * __traits(parent, {})(n - ...
Constantin F.
1
Вопрос тем кто смотрит видео и слушает подкасты - как вы потом ищете нужную вам информацию? Вот статью я прочитал, потом могу искать нужную мне часть банальным поиском. Пропус...
Aleksandr Druzhinin
4
Всем привет, подскажите/посоветуйте пожалуйста. Фаердак компоненты, имею одно место где бизнес хочет видеть при открытии формы список всех клиентов, это порядка 30к. Мои дово...
Sasha Sch
14
Ребят, если кто в курсе - скажите, а в загранке такое же засилье маркетплейсов? или там простые сермяжные интернет-магазины живут попроще?
Андрей [aharito] Харитонов
14
Коллеги, доброе утро. Запустил на удаленном хосте приложение (ручками зашел туда по ssh и запустил, не командой удаленно). Создал потом ssh-туннель, и с моей машины приложение...
Δημήτηρ
9
Карта сайта