Друзья подскажите как отследить причину зависания? Postgres + ORM SQLalchemy

+ pgvector (расширение)

Я сравниваю получаю косинусное расстояние между векторами текстовых предложений, проблема в том что на определенном предложении весь проект зависает, один из процессоров очень долго висит на 100% нагрузке, мне бы заглянуть под "капот" Postgres понять что там происходит, есть варианты?

12 ответов

32 просмотра
MRX- Автор вопроса

Я пробую перед запросом установить "SET statement_timeout = 33000" но это дела не меняет

Для начала -- можэте довести это до одного сравнения пары строк, и выложыть где-нибудь всинущий запрос.

MRX- Автор вопроса
Ilya Anfimov
Для начала -- можэте довести это до одного сравнен...

Да тут в одну строчку запрос similar_messages = select(AllMessages).order_by(AllMessages.embedding_vector.op('<->')(vector_query)).limit(limit) хочу напомнить что в базе искомой 200000 записей, но при этом другие запросы ищет легко, просто одно из предложений вешает все дало, понять не могу. То ли это особенность векторного представления предложений, где я использовал слово "пролечивать" может оно вводит в ступор сравнение векторов?)

MRX
Да тут в одну строчку запрос similar_m...

Давайте орфографию скуля мерить башем, ага... :)

MRX
Да тут в одну строчку запрос similar_m...

Котоый никому не нужэн и ни о чём не говорит. Дажэ если вы выложыте весь этот ваш датасет -- вряд ли кто-то будет этим заниматься. Берите SQL-запрос, выясняйте чем он там занимается.

MRX- Автор вопроса
Вадим «Дым» Илларионов ☭
Давайте орфографию скуля мерить башем, ага... :)

Вот этот дядя если бы был написан на "Эмбеддингах" ответы были бы чаще в точку нежели подобный бредогенератор )

MRX
Вот этот дядя если бы был написан на "Эмбеддингах"...

Крайне любопытно расставить запятые в этом взрыве и хотя бы понять, о чём речь вообще. :)

MRX- Автор вопроса
Ilya Anfimov
Котоый никому не нужэн и ни о чём не говорит. Даж...

Я как бы понимаю от и до чем он занимается, тут дело в том что почему он висит только на определенном запросе, определенном слове ) Возможно и выяснять не нужно, найти просто как отрубать запрос в БД по истечению определенного времени

Ilya Anfimov
Котоый никому не нужэн и ни о чём не говорит. Даж...

Кстати, есть в телеге вполне толковый, но русскоговорящий босниец — по-хорватски глаголицей ебашыд. Кому от этого лучше? Даже не подскажу.

Похожие вопросы

Обсуждают сегодня

Гайс, вопрос для разносторонее развитых: читаю стрим с юарта, нада выделять с него фреймы с определенной структурой, если ли чо готовое, или долбаться с ринг буффером? нада у...
Vitaly
9
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
длина пакета фиксированная, или меняется?
Okhsunrog
7
Вот еще странный косяк, подскажите как бороться. Я git clone сделал себе всего embassy и примеры там запускаю. Всё хорошо. Но вот решил в cargo.toml зависимости не как в приме...
Lukutin R2AJP
5
А в каком формате фреймы? Сам формат сейчас придумываешь, или что-то готовое нужно распарсить?
Okhsunrog
5
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
Всем привет, нужна как никогда, нужна помощь с IO в загрузчике. Пишу в code16 после установки сегментных регистров, пишу вывод символа. Пробовал 2 варианта: # 1 mov $0x0E, %a...
Shadow Akira
14
Раз начали говорить про embassy, то присоединюсь со своими парой вопросов. 1) Есть ли сопоставимые аналоги для асинхронного кода в emdebbed? 2) Можно ли внутри задач embassy ...
NI_isx
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Карта сайта