170 похожих чатов

Есть сущности менеджера и роли, связь многие к одному. https://pastebin.com/ficbRs1U В

сервисе есть метод загрузки менеджеров в БД, который принимает лист ДТОшек, в нём происходит следующее:
1. кидается исключение, если в листе есть дупликаты
2. из таблицы ролей строится мапа название_роли - роль (Map <String, Role>)
3. удаляются все записи из таблицы менеджеров в БД
4. входящие ДТО мапятся в сущность ClientManager, менеджер добавляется в список менеджеров для соответствующей роли и ему сетится роль, если она есть
5. весь лист менеджеров сохраняется в БД

Проблема в том, что между 3 и 5 пунктами может войти менеджер (есть интеграция с другой системой, поэтому это возможно), он запишется в таблицу и произойдёт так, что будет дубль в БД.

Как это можно решить? Используется Spring Data JPA

21 ответов

6 просмотров

Это какой-то странный алгоритм работы, особенно очищение всего. Обновлять нельзя? Если в лоб решать - залочьте всю таблицу и работайте спокойно. Если операция нечастая, а на таблицу не дофига всего завязано, то должно прокатить.

Mikhail- Автор вопроса
Andrey Belyaev
Это какой-то странный алгоритм работы, особенно оч...

Согласен. Вообще переписать стоит. А если залочить, то в потом методе ловить соответсвующее исключение и не пускать пользователя?

Mikhail
Согласен. Вообще переписать стоит. А если залочит...

В смысле? Есть шанс, что транзакция у других пользователей просто “зависнет” и другие сессии будут ждать, пока вы отпустите таблицу. Зависит от реализации блокировок в СУБД и JDBC драйвере. Но я бы так не делал, это уж совсем жесть. На вашем месте сначала бы попробовал разобраться, что в алгоритме делается.

select for update + timeout (ОБЯЗАТЕЛЬНО) + ручная проверка дублей и кастомная обработка

Mikhail- Автор вопроса
Dima
select for update + timeout (ОБЯЗАТЕЛЬНО) + ручная...

А можно поподробнее, пожалуйста? Что почитать можно?

Mikhail
А можно поподробнее, пожалуйста? Что почитать можн...

optimistic locking Pessimistic locking Query timeout Transactional outbox pattern Deadlock

Mikhail- Автор вопроса
Dima
select for update + timeout (ОБЯЗАТЕЛЬНО) + ручная...

Повесил на метод аннотацию @Transactional, аннотацию @Lock(LockModeType.PESSIMISTIC_WRITE), чтобы БД предотвратила чтение и запись сущности любой другой транзакцией. Тогда если попытаться прочитать, то через указанный таймаут возникнет исключение. 1) Я нигде не ошибаюсь? 2) Как понять, какой таймаут ставить? 3) Кастомная обработка == обработка лок эксепшнов, чтобы на фронте показывали "попробуйте позже"?

Mikhail
Повесил на метод аннотацию @Transactional, аннота...

вторая аннотация ставится на метод в jpa репозитории

Mikhail
Повесил на метод аннотацию @Transactional, аннота...

таймаут скорее всего придется ставить через нативный запрос и квэри хинты

Mikhail
Повесил на метод аннотацию @Transactional, аннота...

А чего вы хотите сделать-то? Все ещё таблицу залочить?

Dima
select for update с timeout банальный

Так там изначально было всю таблицу заблокировать, очистить и потом в нее что-то записать. И никто не должен был в нее ничего не дописать

Mikhail- Автор вопроса
Andrey Belyaev
А чего вы хотите сделать-то? Все ещё таблицу залоч...

Решить проблему, что когда через админку грузят справочник (=полностью чистят и заполняют из csv в таблицу БД), то в промежуток между удалением и заполнением может прийти пользователь и записать себя в таблицу, а потом при записи будет дубль уникальных полей Мне в голову пришло несколько вариантов: 1. залочить таблицу. но тогда надо как-то на фронте пользователю сообщать что происходит 2. метод в транзакции, пользователи просто будут читать старые данные из БД пока транзакция незакоммичена и работать как ни в чём ни бывало. Но тогда придётся всегда перед сохранением идти в БД и читать id оттуда

Mikhail
Решить проблему, что когда через админку грузят сп...

@dmsol вот не уверен, что select * for update предотвратит вставку. Я лично вижу только один надежный способ - лочить таблицу и пусть весь фронт подождет. Аккуратно отлавливать эксепшен того, что таблица занята. Второй способ, если СУБД позволяет - делать MERGE или UPSERT - зависит от вендора. И третий способ - я считаю, что вот так вот полностью вычищать таблицу и заново заполнять - это больная фантазия. Я бы 100 раз подумал, прежде, чем такой алгоритм делать. Что у вас там такое, что надо все полностью вычищать?

Mikhail- Автор вопроса
Andrey Belyaev
@dmsol вот не уверен, что select * for update пред...

Справочник менеджеров. Файл - это некий эталон, там всегда актуальные и полные данные. Например, файл отдают партнёрам и они просто добавляют туда своих менеджеров и отправляют обратно, а его уже грузят "Это не моя идея, это всё бизнес"

Dima
так sfu как раз про блокировку

Я про вставку. Ну сделал ты SFU на существующие записи, но не факт, что это предотвратит вставку новых.

Dima
предотвратит дубликат

Это да, тут согласен.

Mikhail- Автор вопроса
Dima
таймаут скорее всего придется ставить через нативн...

У меня в методе происходит вызов deleteAllInBatch()+save(). Думаю тогда можно создать метод-объединение в jpa репозитории и на него повесить @Query+@Lock+@QueryHints({@QueryHint(name = "javax.persistence.lock.timeout", value = "1000")}) же?

Mikhail
У меня в методе происходит вызов deleteAllInBatch(...

я не понял про метод объединение, прочитай про эти аннотации и что они делают

Похожие вопросы

Обсуждают сегодня

а через ESC-код ?
Alexey Kulakov
29
30500 за редактор? )
Владимир
47
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
13
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Как передать управляющий символ в открытую через CreateProcess консоль? Собсна, есть процедура: procedure TRedirectThread.WriteData(Data: OEMString); var Written: Cardinal;...
Serjone
6
в JclConsole объявлено так: function CtrlHandler(CtrlType: DWORD): BOOL; stdcall; - где ваше объявление с stdcall? у вас на картинке нет stdcall
Karagy
8
Ребят в СИ можно реализовать ООП?
Николай
33
program test; {$mode delphi} procedure proc(v: int32); overload; begin end; procedure proc(v: int64); overload; begin end; var x: uint64; begin proc(x); end. Уж не знаю...
notme
6
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта