184 похожих чатов

Доброе утро всем. Я тут новенький. Подскажите пожалуйста как можно переносить

данные из Oracle в ClickHouse ?

6 ответов

9 просмотров

Смотрите в сторону какого нибудь etl продукта

ну самый простой путь без сторонних тулов INSERT INTO ... SELECT .. FROM odbc(...); https://clickhouse.tech/docs/en/sql-reference/table-functions/odbc/ Но надо на сервер clickhouse поставить unixodbc + oracle odbc driver и правильно его настроить и проверять насколько это будет быстро по производительности (можете упереться в скорость odbc) если не пойдет с odbc можно jdbc попробовать еще вариант, выгружать из oracle в CSV и грузить в clickhouse наверняка можно сделать что нибудь типа такого pipe сгородить echo "set colsep ,; set headsep off; set pagesize 0; set trimspool on; spool off; SELECT * FROM db.table;" | sqlplus user/password@host -s /nolog | clickhouse-client -q "INSERT INTO db.table FORMAT CSV"

Ildar Garaev
Например ?

Pentaho, ssis, airflow, luigi, а так, гугл в помощь, их миллион

Ildar-Garaev Автор вопроса
Slach [altinity]
ну самый простой путь без сторонних тулов INSERT ...

CSV пробовал - 10% процентов данных отбрасываются по разным причинам - то спецсимволы в данных то скобки. тяжело найти хороший разделитель - и если экранировать кавычки во всех полях (таблица 130 колонок), то это замедляет.

Ildar Garaev
CSV пробовал - 10% процентов данных отбрасываются ...

ну можно попробовать https://github.com/xo/usql для коннекта к oracle и делать usql "oci8:user:password/host:port/database" -c "SELECT ..." --csv но тоже не знаю насколько это будет быстро

Похожие вопросы

Обсуждают сегодня

Добрый день. Хочу сделать отрисовку по команде на панели. Почему-то рисуется только при втором вызове. С чем может быть связано, не подскажете? procedure TForm1.FormDblClick(...
Kirill Filippenok
20
а зачем этот вопрос для удаления из чата?
Mёdkinson Medvezhkin
63
А почему в си некоторые вещи работают с двойными кавычками некоторые с одинарными? Нельзя было все сделать с одними или чтоб работало с разными? например чтоб выводить строки ...
.
15
Всем привет! Нужен совет от опытных. Переношу свой проект с Делфи 10.2 Токио на Лазарус 3.2 установленный через инсталлятор fpcupdeluxe-x86_64-win64. При импортировании проект...
Дмитрий Завгородний
7
Всем привет! procedure TForm1.FormCreate(Sender: TObject); type TStartEnd = record S: Byte; E: Byte; end; var a, b: TStartEnd; begin {1} a.S := 1; {2} a.E := 2; ...
Руслан Михайлович
10
Всем привет!) я тут новенький и пытаюсь освоить evolution методом тыка. У меня при переходе между папками файлов выскакивают вот такие уведомления Можете подсказать как их от...
Диман Samoed
10
Эх кто-то пришел и весь праздник испортил :( You need complex FBX scene importing setup to change things on import? good luck with that. You need navigation and pathfinding? g...
Serg Gini
5
Всем привет! Подскажите. Я написал приложение на Delphi 10.2 Tokyo под Windows 10. И передо мной стал вопрос о том чтобы сделать это приложение кроссплатформенным (под Linux и...
Дмитрий Завгородний
24
Какого хера? /Sources/App/Modules/User/Models/UserLinkApple.swift:21:20: warning: stored property '_id' of 'Sendable'-conforming class 'UserLinkApple' is mutable @ID(...
Alexander Sherbakov
14
Привет всем. Подскажите где можно посмотреть, какая версия электрон, поддерживает версии windows? Некий changelog. Мне бы желательно, поддержку 7,8,10... latest, как понимаю и...
Anonym Squad
21
Карта сайта