172 похожих чатов

8 ответов

7 просмотров

из одной таблицы 100млн записей (некоторые поля) в другую сохраняю может кто писал для этого функцию или процедуру? для записи по частям чтобы видеть статус процесса

Геннадий
из одной таблицы 100млн записей (некоторые поля) в...

А вы выборку из первой таблицы проверяли через EXPLAIN ANALYZE? Может там индексов не хватает (если не все строки вытаскиваете)

Vitaly-Ustinov Автор вопроса
Геннадий
из одной таблицы 100млн записей (некоторые поля) в...

Нужно выбирать кусками (размер подберёте сами), фиксить тоанзакцию, и в другой сессии будет виден прогресс. Чтобы разбить данные на куски удобнее всего использовать оконную функцию ntile(num_buckets integer)

Vitaly-Ustinov Автор вопроса
Геннадий
спасибо, почитаю

Делаете хранимую процедуру (не функцию!), в ней цикл с insert из select по кускам, и commit в каждой итерации.

Vitaly Ustinov
Делаете хранимую процедуру (не функцию!), в ней ци...

ок, а как -то можно ответ каждого insert в вызывающий код отправлять?

Геннадий
ок, а как -то можно ответ каждого insert в вызываю...

Никак... писать в другую таблицу и мониторинг её.

Petr
Никак... писать в другую таблицу и мониторинг её.

Вообще-то можно. Insert into my table (...) returning into v_column.

Похожие вопросы

Обсуждают сегодня

Доброй ночи. Вопрос знатокам. Имеется некая таблица, результат которой выведен в DBGrid на форме. И есть форма, с помощью которой можно как добавить запись, так и отредактиров...
Евгений
27
а всё почему? потому что ассемблер в отличии от яву порождает множество пагубных привычек, среди которых например можно отметить использование глобальных переменных для всего ...
Mixail Frolov
35
Всем привет 👋 Подскажите пожалуйста, а чего тут не хватает permission или образ битый? Running with gitlab-runner 17.0.0 (44feccdf) on gitlab-runner-c58775949-d7znz YxYz2zp...
Max
2
анрей С какой целью зашёл?
КТ315
42
Кто нибудь из участников чата пишет на ассемблере под GNU/Linux?
Spiker01
24
я часов 15 назад начал пытаться написать хоть что-то напоминающее ос и у меня есть проблема, которую я пытаюсь решить последние часов 5: есть крч 2 исходника с минимальным код...
Al1to
17
Всем привет ребят! Мб кто-то сталкивался? adminСomponents .get("searchСomponents", use: searchComponents) .openAPI( summary: ...
Admin Adminov
2
Кстати вопрос. Проанализировав свои проекты я понял, что в наиболее ценных из них Асм использовался для организации real-time процессов (внутри DOS). А какие есть способы сего...
Alexander Morozov
18
Я не очень много работал с потоками, тут возник вопрос - если будет одновременный доступ к памяти из двух разных потоков, это само по себе приведет к ошибке?
The Bird of Hermes
25
Насколько моя реализация Exercise 1 плохая? data MessageType = Info | Warning | Error Int deriving (Show, Eq) type TimeStamp = Int data LogMessage = LogMessage ...
= ?
6
Карта сайта