207 похожих чатов

Добрый день, уважаемое сообщество тестировщиков. Я готовлю презентацию на тему использования

статистики в тестировании, для которой я хочу собрать материал об использовании тестовых метрик в командах тестирования. Для этого я прошу Вас поделиться информацией о том:
* какую статистику о тестировании вы собираете и анализируете на постоянной основе
* какая статистика была собрана лишь однажды, но оказалась очень полезной для понимания сути происходящего

Например:
* график найденных багов за определенный отрезок времени (неделя, месяц, квартал, год)
* график с количеством выполненных тест-кейсов
* график с количеством запущенных тест-ранов с количеством failed/success build’ов и времени выполнения каждого тест-рана
* рейтинг самых время затратных для выполнения тест-кейсов

Я буду очень благодарен каждому, кто поделится примерами графиков, которые вы создаете на основании собранных метрик тестирования. Ответ не должен быть максимально развернут или как-то аргументирован. Мне важно лишь узнать какую статистику собирают и используют на практике другие команды и какие самые популярные виды графиков, построенные на основании собранных тест данных

Ссылка на опрос: https://goo.gl/forms/a8QGMF0tO0PGfoyW2
Или вы можете дать ответ прям в этом топике: http://software-testing.ru/forum/index.php?/topic/36229-statistika-v-testirovanii/
Ответы в Telegram'e так же приветствуются

С уважением,
Евгений.

3 ответов

18 просмотров

Я бы посоветовал немного перефразировать, из "использования статистики в тестировании" в сторону "использования статистики тестирования". Возможно это, конечно, только в моей голове так, но первая формулировка больше про использование статистических данных о продукте в ходе его тестирования (условный data-driven), а второе - про метрики самого тестирования как процесса. Конечно развернутое объяснение примеров проясняет всё, но тем не менее.

Если по теме: у нас сейчас автоматически собирается время прохождения тестов и ранов, багрейт на регрессии, среднее время прохождение теста. Данные этим мы, конечно же, используем примерно никак, потому что нафиг они не нужны. :)

Хм.. ну я смотрел подобный доклад, но он был больше о технической стороне вопроса. Кстати и нашёл доклад Доклад Артёма Ерошенко - расказал больше про то чем ему помогла Grafana для статистики/аналитики автотестов

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта