Как мне сразу в запросе отобрать элементы с bOrder =

Question

ClickHouse не тормозит

Igor Petrov

Как мне сразу в запросе отобрать элементы с bOrder =

1 ?
Select sessionTimestamp, groupArray(eventName) as gEventName, arrayExists(x->(x='bOrder'),gEventName) AS bOrder

#backend #clickhouse #database #devops #programming #russian

0

05.06.2021

23 ответов

12 просмотров

Igor Petrov Автор вопроса

Slach [altinity]
WHERE bOrder=1 не получается?

Нет, агрегирования функция в запросе. Выдает ошибку

0

05.06.2021

Igor Petrov Автор вопроса

Slach [altinity]
WHERE bOrder=1 не получается?

DB::Exception: Aggregate function groupArray(eventName) is found in WHERE in query: While processing groupArray(eventName) AS gEventName (version 21.5.6.6 (official build))

0

06.06.2021

Slach [altinity]

Igor Petrov
DB::Exception: Aggregate function groupArray(event...

а есть какое нибудь поле типа sessionid ?

0

06.06.2021

Igor Petrov Автор вопроса

Slach [altinity]
а есть какое нибудь поле типа sessionid ?

sessionTimestamp

0

06.06.2021

Slach [altinity]

Igor Petrov
sessionTimestamp

это не sesionid слишком мало уникальности и слишком много дублей придется делать через отдельную таблицу CREATE TABLE order_sessions ...; INSERT INTO order_sessions Select sessionTimestamp, groupArray(eventName) as gEventName, arrayExists(x->(x='bOrder'),gEventName) AS bOrder; SELECT * FROM order_session WHERE bOrder=1;

0

06.06.2021

Igor Petrov Автор вопроса

Slach [altinity]
это не sesionid слишком мало уникальности и слишк...

Дублей нету почти

0

06.06.2021

Igor Petrov Автор вопроса

Slach [altinity]
это не sesionid слишком мало уникальности и слишк...

А под запросами не правильно будет писать? WITH

0

06.06.2021

Slach [altinity]

Igor Petrov
А под запросами не правильно будет писать? WITH

подзапросы памяти много жрать будут... в принципе если памяти много, то можно вот так SELECT * FROM (SELECT ... ) WHERE bOrder=1

0

06.06.2021

Igor Petrov Автор вопроса

Slach [altinity]
подзапросы памяти много жрать будут... в принципе ...

Пока локальное все и много памяти.... И правильнее через `WITH или `SELECT * FROM (SELECT ... )?

0

06.06.2021

Denny [Altinity]

Igor Petrov
DB::Exception: Aggregate function groupArray(event...

а разве не в having должно быть условие на агр. функцию?

0

06.06.2021

Denny [Altinity]

Slach [altinity]
подзапросы памяти много жрать будут... в принципе ...

это все равно стримится, ни при чем тут память

0

06.06.2021

Igor Petrov Автор вопроса

Denny [Altinity]
а разве не в having должно быть условие на агр. ...

Да работает, но теперь памяти не хватает)) Memory limit (for query) exceeded: would use 9.32 GiB (attempt to allocate chunk of 137578518 bytes), maximum: 9.31 GiB: While executing AggregatingTransform

0

06.06.2021

Denny [Altinity]

Igor Petrov
Да работает, но теперь памяти не хватает)) Memory ...

версия КХ ? И без having типа работало?

0

06.06.2021

Igor Petrov Автор вопроса

Denny [Altinity]
версия КХ ? И без having типа работало?

21.5.6.6 без него вообще не работало

0

06.06.2021

Denny [Altinity]

Igor Petrov
21.5.6.6 без него вообще не работало

set max_bytes_before_external_group_by='5G'

0

06.06.2021

Igor Petrov Автор вопроса

Denny [Altinity]
set max_bytes_before_external_group_by='5G'

Не помогает, e.displayText() = DB::Exception: Memory limit (for query) exceeded: would use 9.31 GiB (attempt to allocate chunk of 137191537 bytes), maximum: 9.31 GiB: While executing AggregatingTransform

0

06.06.2021

Denny [Altinity]

Igor Petrov
Не помогает, e.displayText() = DB::Exception: Mem...

странно, а если set min_bytes_to_use_mmap_io=0; ?

0

06.06.2021

Igor Petrov Автор вопроса

Denny [Altinity]
странно, а если set min_bytes_to_use_mmap_io=0; ?

Тоже самое

0

06.06.2021