📊 Припиніть рахувати баги: 4 метрики QA, які реально мають сенс

Привіт, екіпаж! У багатьох компаніях QA-звіт виглядає так: "Ми написали 50 тест-кейсів і знайшли 10 багів. Ми молодці". Це найгірша метрика у світі. Чому? Бо можна написати 50 кейсів на перевірку шрифтів і знайти 10 друкарських помилок, поки на проді не працює оплата. Активність є, якості немає. Якщо ви хочете говорити з бізнесом однією мовою, викиньте старі звіти і почніть міряти те, що болить.Ось 4 метрики, які показують реальну картину:🛑 Defect Leakage (Витік багів на прод). Це головний показник вашої ефективності. Суть: Скільки багів знайшли ми (QA), а скільки знайшли розлючені користувачі?
Формула: (Баги на проді) / (Всього багів) * 100%Мета: Прагнути до < 5%.Чому це важливо: Якщо ви знаходите 1000 багів, але клієнти все одно скаржаться — ваше тестування неефективне. Ви перевіряєте не те.
⏳Mean Time to Detect (MTTD) & Repair (MTTR). Суть: Як довго баг живе в системі?
MTTD: Скільки часу пройшло від моменту "код залили" до "QA знайшов баг"? (Година? День? Тиждень?).MTTR: Скільки часу пройшло від "баг знайдено" до "фікс на проді"?Чому це важливо: Чим довше живе баг, тим дорожче його фіксити. Якщо MTTR високий — у вас проблеми з процесами, а не з тестувальниками.

📉 Automated Tests Stability (Стабільність тестів) Суть: Скільки разів ваші автотести впали "просто так" (flaky tests)?
Ситуація: За ніч прогналося 500 тестів. 50 впало. Ви перезапустили — всі зелені.Висновок: Вашій автоматизації ніхто не вірить. Вона не допомагає, а забирає час на розбір помилкових тривог.Метрика: Відсоток flaky-тестів має бути 0%. Якщо тест "мигає" — видаліть його або перепишіть.

🎯 Requirement Coverage (Покриття вимог) Забудьте про Code Coverage. Суть: Чи покрита кожна бізнес-вимога хоча б одним тестом?
Ситуація: У нас 100% покриття коду юніт-тестами, але ми забули написати тест на сценарій "Користувач скасовує замовлення".Чому це важливо: Це страхування бізнесу від того, що ми забули реалізувати якусь фічу.
☠️ Метрики, які треба вбити: ❌ Кількість тест-кейсів. (Якість > Кількість). ❌ Кількість знайдених багів на одного QA. (Це призводить до того, що QA заводять баги на кожен зайвий піксель, щоб набити статистику).Висновок: Хороший QA Lead приходить до менеджера не з цифрою "Ми знайшли 100 багів", а з фразою: "Ми знизили витік помилок на прод на 20% і прискорили фікс критичних багів удвічі". Ось за це дають премії. А які метрики вимірюють у вас на проекті?

👇