207 похожих чатов

Всем привет. Подскажите пожалуйста, а как вообще обычно организуют автотесты

для продакшена?
В том смысле, что, созданные автотестами данные должны же как-то исключаться из выдачи на продакшене, из аналитики, итд?
Может кто-то посоветовать best practices как это обычно делают?

10 ответов

14 просмотров

не тестируют на проде, делают препрод на таких же (только обфусцированных) данных. На проде только смоук тесты на заранее подготовленных аккаунтах, или как то помечаемых при создании тестовых аккаунтах

Victor- Автор вопроса
Алексей
не тестируют на проде, делают препрод на таких же ...

Ну, со стейджингом понятно. А на проде единственный выход -- делать пометки для таких аккаунтов, и переписывать логику аналитики и поиска, исключая их из выдачи?

Victor
Ну, со стейджингом понятно. А на проде единственны...

да, мы делали признак тестового аккаунта, соответственно все данные по таким аккаум выфильтровывались, плюс ограничение на платежи на них было

Victor- Автор вопроса
Алексей
да, мы делали признак тестового аккаунта, соответс...

Ага... Ну это первое что мне пришло в голову тоже, но надеялся что есть какой-то хитрый вариант, который позволит не переписывать логику в аналитике итд 😅

Victor- Автор вопроса
Алексей
да, мы делали признак тестового аккаунта, соответс...

То есть для стейджинга вы прогоняете весь набор автотестов (и позитивные и негативные тесты), а для продакшена только короткий смоук + самые важные для бизнес-логики тесты, исключая их из выдачи и аналитики?

Victor
Ага... Ну это первое что мне пришло в голову тоже,...

ткой вариант есть - не тестить на проде на новых аккаунтах, а на флоу нового юзера повесить специальные эвенты и на них мониторинг, соотв если внезапно чудом отвалится рега - мониторинг заметит что перестали идти рег ивенты и тп и поднимет тревогу

Victor
То есть для стейджинга вы прогоняете весь набор ав...

да. из аналитики в основном придется реги выфильтровывать, чтобы на конверсию не повлияли

Victor- Автор вопроса
Алексей
да. из аналитики в основном придется реги выфильтр...

Да у нас сервис сильно обвешен аналитикой, отчетами, редашем, итд.Нельзя это портить тестовыми данными, но и сильно переписывать бэкенд для отфильтрации этих тестовых данных тоже не хочется. Есть два стула короче, сижу думаю 😅

Victor- Автор вопроса
Алексей
да. из аналитики в основном придется реги выфильтр...

а какой это у вас признак, если не секрет? как вы определяете, что это тестовые данные были?

Victor
а какой это у вас признак, если не секрет? как вы ...

на главную таблицу с юзерами добавили колонку IS_TEST_USER соотв аналитика выбрасывала любого юзера с этим признаком

Похожие вопросы

Обсуждают сегодня

30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
Как передать управляющий символ в открытую через CreateProcess консоль? Собсна, есть процедура: procedure TRedirectThread.WriteData(Data: OEMString); var Written: Cardinal;...
Serjone
6
в JclConsole объявлено так: function CtrlHandler(CtrlType: DWORD): BOOL; stdcall; - где ваше объявление с stdcall? у вас на картинке нет stdcall
Karagy
8
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
~ 2m21s  nix shell github:nixos/nixpkgs#stack ~  stack ghc -- --version error: … while calling the 'derivationStrict' builtin at /builtin/derivation.nix:...
Rebuild your mind.
6
Карта сайта