172 похожих чатов

Привет, как определить, когда еще можно улучшить запросы, а когда

стоит улучшать железо?
есть таблица, которая сейчас занимает 30 миллионов строк и растет на ~10 миллионов в сутки на сервере с 4 ядрами и 8 гб оперативки и банальный count там выполняется 3 секунды
primary key - uuidv4
это нормальная производительность или что то можно затюнить?

18 ответов

9 просмотров

count невозможно ускорить, так как требует полный скан таблицы

биллинг свой делаете?

Fᴏʀᴅᴇɴ- Автор вопроса
Alexey Bulgakov
биллинг свой делаете?

нет, реакции пользователей собираем грубо говоря лайки

Fᴏʀᴅᴇɴ- Автор вопроса
Alexey Bulgakov
секционирование?

еще не пробовали это то что нужно для больших таблиц?

Alexey Bulgakov
секционирование?

И как ему поможет партиционирование в подсчёте всех?

Fᴏʀᴅᴇɴ
нет, реакции пользователей собираем грубо говоря л...

У вас count с условиями? Или на всю таблицу? Почему не кешируете?

Нормальная производительность или нет — зависит в первую очередь от бизнес-требований. Если та, что есть всех устраивает — то нормальная. Если на этом вы теряете клиентов или деньги — то, возможно, надо её улучшыть. Возможно и нет, если улучшать ещё дорожэ.

central hardware
count невозможно ускорить, так как требует полный ...

Возможно. Есть сэмплинг, есть другие оцэнки, есть предварительные подсчёты.

Fᴏʀᴅᴇɴ- Автор вопроса
Ilya Anfimov
Количество лайков лучшэ просто хранить.

если бы такое было возможно - просто хранили бы а так они влияют на дальнейшее поведение сервиса для пользователя

Fᴏʀᴅᴇɴ
если бы такое было возможно - просто хранили бы а ...

ЯННП. (И да, неоднозначно выразился. Просто — в смысле хранить количество рядом с записью, а не в смысле — хранить только количество, а не клики).

Alexey Bulgakov
секционирование?

При росте 10млн в сутки — давно пора, скоро прямо-таки в лимиты таблиц стукаться будет.

Ilya Anfimov
При росте 10млн в сутки — давно пора, скоро прямо-...

Большинство с моим предложением не согласны 🙂

Alexey Bulgakov
Большинство с моим предложением не согласны 🙂

И вробще, тот слуяай, когда можно попробовать citus. Довольно разрозненные данные, но их очень много.

Далее — всегда полезно самому чётко определить, что система делает при запросе. И что ты в идеале хотел бы, чтобы она делала. И чем одно от другого отоичается. Если всё и так по минимуму — то вздохнуть и забить. Если действия близки к идеальным, но затраты postgres на них велики — то подумать, что его задержывает, почитать код. Если действия неблизки к идеальным — то оптимизировать запросы, чтобы работал как хочется.

Похожие вопросы

Обсуждают сегодня

я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
49
читать файл максимально быстро? странный вопрос))
zamtmn
53
Всем доброго вечера! Хочу поделиться своим злоключением с человеком, который, как оказалось сюда тоже скидывал свое резюме. Жаль, что я вашу группу не нашел раньше… человек ки...
Роман Ахмедзянов
4
How to create an OS in C? what to study?
Linus
18
Компания Elif ищет менеджера проектов, который будет заниматься поиском и ведением новых проектов. Прежде чем приступить к работе, вам нужно пройти наш недельный курс, где вы ...
Elif
5
тоесть, указав return eax, сгенерируется никому ненужная инструкция mov eax,eax ?
Aiwan \ (•◡•) / _bot
24
Привет, кто может сделать юзербота с апи? Задачи: - создавать группы - создавать каналы - задавать для созданных каналов аватарку или эмоджи, имя группы - добавлять в группы...
Lencore
11
@HemulGM Параметры у AddStream поменялись? Несостыковка какая-то
Катерина Свиридова
12
а зачем этот вопрос для удаления из чата?
Mёdkinson Medvezhkin
63
Народ, с прошедшими и наступающими. Ща полную ересь прогоню, но фишка в том, что это не обычная алкогольная ересь Либера, а я реально хз что делать. Сайт с 2012-го года Косяк...
Alexey Liber
1
Карта сайта