Коллеги добрый день. Подскажите пожалуйста как ускорить обработку таблиц в

Power Query Power BI. У меня таблица 54 столбца и 700 000 строк. В BigQuery. Когда начинаю создавать таблицы индекса для каждого столбца по мере набора последовательных запросов комп начинает тормозить. Уже на 5-м столбце запрос в BQ 7 млн строк. Чтобы создать таблицы индексов для каждого столбца, я дублирую запрос общей таблицы, затем удаляю все другие столбцы, удаляю дубликаты и пустые. При каждом запросе это десятки минут. Может есть лучший алгоритм как это сделать?

3 ответов

15 просмотров

Менять подход и НЕ тянуть ВСЕ

Добрый! Так у вас sql тормозит или pq? Если pq, переносите все в sql и забирайте сразу то что нужно, а не все подряд

Andrei-Andreev Автор вопроса
Александр Морин
Добрый! Так у вас sql тормозит или pq? Если pq, пе...

Правильно ли я понимаю создать все нужные таблицы в BQ через sql затем их грузить в pbi и настраивать связи. А как в таком случае ежедневное обновление делать? Где?

Похожие вопросы

Обсуждают сегодня

Добрый день! Вопрос, понимаю, не очень принципиальный и можно его обойти, но просто любопытно, откуда в срезе берётся "Пусто"? Если в срез перетягиваю Месяц из Sales, то всё х...
Anastasiya
28
Добрый день! Помогите, пожалуйста, может быть кто сталкивался. У заказчика есть интересное требование. Есть данные по проектам и дисциплинам по этим проектам (каждый проект ...
Leonid Solovev
20
Добрый вечер. Поручили выбрать сервис для нового дашборда компании. Пока выбор упал на power bi. Можете что нибудь рассказать об опыте использования? Подводных камнях, способо...
Илья
33
добрый день всем! Пожалуйста, помогите решить данную проблему: дашборд не мой, при обновлении датасета с браузера - выдает ошибку - {"error":{"code":"DM_GWPipeline_Gateway_Mas...
Feniks Sushhaya
15
Здравствуйте! Подскажите, можно ли в DAX вычесть НДС прямо в формуле SAMX, или нужна обязательно таблица с процентами НДС? "НДС нужно исключить. Считайте НДС равным 1.2 (20%)....
Владимир
26
Добрый день, Коллеги. Подскажите пожалуйста в чем причина ? При выборе поля Размер, гистограмма по Размерам формируется , а по Складам -нет. Названия Складов все заполнены ...
Julia Po
33
Всем привет) Я уже задавала этот вопрос на прошлой неделе, но возможно, в пятницу было очень непонятно сформулировано. Постаралась сейчас максимально понятно все описать Необ...
Катя Каткова
4
День добрый. Есть такой вопрос. Имеем матрих таблицу, есть по каждому человеку группы вопросов, он отвечал на них и имеет баллы. Т. Е. В группе есть несколько вопросов. Нужно ...
Oleg Savinkov
21
Коллеги! По одиночке в стреде PBI Desktop все запросы к Analytic srv и SQL SRV отрабатываются долго (много данных), но выполняются. Но при обовлении всей модели выдает ошибк...
Антон Москвин
23
Видимо это имели в виду?
Ekaterina Lelekova
25
Карта сайта