Добрый день, коллеги! Нужно сделать выгрузку регулярную. из терминала. pg

12
Делаю на bash

#!/bin/bash
psql
\o /data/file.log
select * from “table_name”;
\o

Могу таким способом выгрузить? Прошу подсказать другой рабочий метод 🙏🏻 Спасибо заранее

https://www.postgresql.org/docs/current/sql-copy.html Examples The following example copies a table to the client using the vertical bar (|) as the field delimiter: COPY country TO STDOUT (DELIMITER '|'); To copy data from a file into the country table: COPY country FROM '/usr1/proj/bray/sql/country_data'; To copy into a file just the countries whose names start with 'A': COPY (SELECT * FROM country WHERE country_name LIKE 'A%') TO '/usr1/proj/bray/sql/a_list_countries.copy'; To copy into a compressed file, you can pipe the output through an external compression program: COPY country TO PROGRAM 'gzip > /usr1/proj/bray/sql/country_data.gz';

PGPASSWORD='пароль_к_бд' psql -U роль_в_бд -h хост_бд -d имя_бд -A -F";" < /путь_до_файла/файл_с_запросом.sql > /путь_вывода/вывод_результатов_запроса.csv

Выгрузку в какой формат? В любом случае, лучше пользоваться COPY, если есть возможность. В psql для этого есть удобная метакоманда \copy (обёртка над COPY ... TO STDOUT), посмотрите его документацию.

В любом читабельном формате, дальше данные будем пересылать в splunk

этот же скрипт в bash можно запускать?

да, нужно ))

Ну так используйте \copy — там есть csv. А сам psql умеет выводить результаты в форматах "aligned, asciidoc, csv, html, latex, latex-longtable, troff-ms, unaligned, or wrapped" (но это медленнее / требует "подтачивания" (задания таких ключей psql, чтобы получалось именно то, что нужно, и не было лишнего — можно начать с psql -Xq... ).

Добрый день! Подскажите, пжс, если для входа в БД нет пароля, можно без него коннектиться в бд, чтобы выгрузку данных сделать? PGPASSWORD= psql -U роль_в_бд -h хост_бд -d ?

Да если например брать стандартный образ в докере. Локальный вход делается без пароля. Если я правильно понял то вот о это написано: https://www.postgresql.org/docs/current/auth-trust.html

Пробуйте))

Добрый день! Прошу подсказать, в чем синтаксическая или иная ошибка? #!/bin/bash PGPASSWORD='password' psql -U root -h host -d postgres -A -F";" < /data/request.sql > /data/Jun2023.csv в файле request.sql  находится запрос select * from "schema_name"."audit_table_2023_06" where action_id = 17; Файлы сделала исполняемыми на всякий случай и присвоила владельца postgres После запуска скрипта формируется файл csv, но пустой.

кавычки у схемы и у бд

‘ обычная кавычка не помогает

вообще не надо

с кавычками селект отрабатывал отдельно, а без них нет.

А как называется БД, в которой находится эта таблица? postgres, как у вас и написано в команде, или иначе?

сама бд по-другому называется. Бд находится локально, при подключении использую ip адрес.

при ручном подключении все отрабатывает: коннект к бд и селект.