172 похожих чатов

Добрый день. Хотелось бы услышать мнение людей по поводу следующей

ситуации.
1. Есть дефотный postgres и табличка (картинка).
2. В эту табличку будут писаться данные. Примерно 6к записей в секунду.
3. Данные должны хранится и пользователь должен иметь к ним "оперативный" доступ в течении 5 лет.

Вопрос. Вот например у нас накопилось там 5 миллиардов записей.
Как мне оценить в этом случае скорость выборки данные, например по диапазону 1 сутки?
Как подобрать железо и вообще что из этого выйдет.
Саму таблицу мы не можем изменять. А всё вокруг можем.
Поделитесь мнением, пожалуйста.

5 ответов

26 просмотров

Покажите \d+ таблицы (не нужно картинок, в них всё равно не видно индексов и т.п.). > пользователь должен иметь к ним "оперативный" доступ А что это значит, в принципе? > Как мне оценить в этом случае скорость выборки данные, например по диапазону 1 сутки? Например, никак. ;) Более конкретные запросы (по каким критериям — за какие сутки (5 лет назад или вчера, например), какие ещё условия) нужны для этого. > Как подобрать железо и вообще что из этого выйдет. Очень зависит от ответов на вопросы выше.

Anton-『被遗忘的社会』 Автор вопроса
Yaroslav Schekin
Покажите \d+ таблицы (не нужно картинок, в них всё...

Извиняюсь за кодировку. Не смог с полтычка победить... Оперативный доступ означает, что человек без каких либо манипуляций с сервером (развернуть бекап или т.п.) мог получить доступ к данным.

Anton-『被遗忘的社会』 Автор вопроса
Yaroslav Schekin
Покажите \d+ таблицы (не нужно картинок, в них всё...

По каким "суткам". В идеале конечно могут заглянуть и на 4 года назад. Но в основном это операции до 3 месячной давности

Anton 『被遗忘的社会』
Извиняюсь за кодировку. Не смог с полтычка победит...

Да текстом же... и как Вы только эту кодировку терпите, да. ;) (Я вот всегда стараюсь ставить LC_MESSAGES=C для сервера PostgreSQL, ну и utf-8 для клиента.)

Anton-『被遗忘的社会』 Автор вопроса
Yaroslav Schekin
Да текстом же... и как Вы только эту кодировку тер...

Секционированная таблица "public.trends" Столбец | Тип | Правило сортировки | Допустимость NULL | По умолчанию | Хранилище | Сжатие | Цель для статистики | Описание ---------+--------------------------------+--------------------+-------------------+--------------+-----------+--------+---------------------+---------- id | integer | | not null | 0 | plain | | | l | smallint | | not null | 0 | plain | | | t | timestamp(3) without time zone | | not null | | plain | | | v | double precision | | | | plain | | | q | integer | | not null | | plain | | | Ключ разбиения: RANGE (t) Индексы: "tpk" PRIMARY KEY, btree (id, l, t) Секции: tp2023m06d01 FOR VALUES FROM ('2023-06-01 00:00:00') TO ('2023-06-02 00:00:00'), tp2023m06d02 FOR VALUES FROM ('2023-06-02 00:00:00') TO ('2023-06-03 00:00:00'), tp2023m06d03 FOR VALUES FROM ('2023-06-03 00:00:00') TO ('2023-06-04 00:00:00'), tpdefault DEFAULT

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта