Техніки Тест-дизайну: Як Тестувати Розумніше, А Не Складніше

Та за весь час досвiду в індустрії найчастіше я помічав неправильне розуміння ключових технік, покликаних спростити та прискорити тестування програмного забезпечення. Здебільшого, ці техніки застосовуються скоріше як кліше, від яких відштовхуються при створенні тестової документації. При цьому інженери забувають про те, що ці техніки — насамперед техніки аналізу, який повинен проводитися в скоупі з іншими інструментами та методиками. Щоб обрати тестові дані для кожного діапазону, ми можемо застосувати вже знайомі нам техніки Equivalence Partitioning та Boundary Value Analysis.

Теорія Тестування Від А До Я

Наприклад, якщо ризик і складність низькі, використовуйте лише тестування. Якщо вони трохи вищі, використовуйте дослідження та прості методи, що базуються на специфікаціях, такі як класи еквівалентності з аналізом граничних значень. Якщо ризик високий, ви можете використовувати дослідницьке тестування, комбінаційне тестування, запобігання дефектам, статичний аналіз та огляди (reviews). Аналіз граничних значень (Boundary Value Analysis) – це техніка перевірки поведінки продукту на крайніх (граничних) значеннях вхідних даних.

Таким чином, кожен стовпець стає тест кейсом, де в умовах вказуються вхідні дані, а в діях — очікуваний результат. Створімо таблицю рішень для такої фічі як Notifications в Slack застосунку, коли повідомлення надсилається в канал. State Transition Testing — техніка, яка використовується для перевірки здатності тестового об’єкта входити та виходити з визначених станів використовуючи валідні переходи. Рекомендують замінити їх значеннями, які найчастіше зустрічаються у користувачів, або значеннями, в яких найчастіше виникали дефекти.

Наведений вище приклад досить простий і не вимагає великого знання та розуміння контексту. Однак у реальних завданнях кейси набагато менш очевидні, і професійної інтуїції вже не вистачить. Так, всі учасники мінікурсу Superior Test Design матимуть доступ до записів занять та інших матеріалів мінікурсу протягом всієї тривалості мінікурсу, а також на період 6 місяців після завершення. Наступні дві техніки тест-дизайну базуються на досвіді у тестуванні.

Отже ми переходимо до наступного етапу — створення тест-кейсів, використовуючи відповідні техніки тест дизайну. Ефективність тієї чи іншої техніки тест-дизайну завжди залежить від знання системи та її прихованої логіки. Більше того, при різному рівні розуміння системи, класи можуть узагальнювати абсолютно різні об’єкти. Якщо ви вважаєте, що я використала замало даних чи зробила це занадто просто, то це нормально, бо я не вводила в контекст багато різних даних, щоб все було максимально зрозумілим.

В цьому випадку вважаю за доцільне прописати два тест-кейси, якщо ерорка для невалідних даних буде однаковою в усіх невалідних випадках. Далі нам потрібно заповнити рядки з діями, які слід виконувати чи не виконувати, залежно від комбінацій умов у кожному стовпці. Важливо зауважити, що ця техніка застосовується до одного конкретного об’єкта, де ми визначаємо стани цього об’єкта, дії, які впливають на цей об’єкт, і переходи об’єкта з одного стану в інший.

Check Case

Однак, я буду дуже вдячна, якщо ви зможете поділитися інформацією чи статтею, де описано інший підхід. Цей метод особливо корисний, коли вимоги документуються у вигляді блок-схем або бізнес-правил з твердженнями на кшталт «якщо A і B істинні, то виконайте дію C». Техніка State Transition Testing може бути представлена у вигляді діаграми або у вигляді таблиці. Ми можемо застосувати той самий інструмент для створення тестів. Точність цієї методики залежить від точності визначення еквівалентних класів. Ці два терміни часто плутають і використовують як синоніми, тому почнімо з обговорення різниці між ними.

Але чи знаєш ти, що існують спеціальні техніки тест-дизайну, які можуть покращити ефективність цього процесу? Ці техніки є інструментами, які допомагають створювати сценарії тестування, спрямовані на виявлення найважливіших проблем та аспектів продукту, включаючи його специфікації, умови виконання, та можливі помилки у коді. Тепер ми маємо всі можливі комбінації умов та дій для програми. Наприклад, якщо ми вводимо правильну дату народження, програма обчислить вік. Якщо ми вводимо недійсну дату, програма повинна вивести повідомлення про помилку.

Також, в свій час, дивилась щорічні SQA days конференції та проходила кілька курсів, автори яких з країни агресора, тому без посилань. Якщо у вас є особистий промокод на знижку, залиште його в полі коментар, у формі реєстрації. Вимоги описують те, що необхідно реалізувати, без деталізації технічного боку курси qa automation рішення. Як правило, більшість дефектів, виявлених при тестуванні, міститься в невеликій кількості модулів. На перетині — позначка, що означає, що вимога поточної колонки покрита тестовим сценарієм поточного рядка.

• У наведених вище тест кейсах значення комбінуються випадковим чином, але наші комбінації можуть не збігатися з комбінаціями користувачів, і ми можемо пропустити дефекти.
• Ви навчитеся застосовувати знання про минулі дефекти та інтуїцію для пошуку нових вразливостей, працюючи над покращенням якості продукту.
• Тестування може показати, що дефекти в системі є, але не може довести, що їх немає.
• При цьому система повинна певним (заздалегідь обумовленим) способом обробляти такі ситуації.
• Але, на жаль, найчастіше функції цих спеціалістів виконують тестувальники.

Немає принципового значення, який токен буде ключовим, якщо у них однакові адреси й ми перевіряємо всі три типи транспорту. З цієї точки зору, згідно з наявним аналізом даних на цей момент, такий набір тестів оптимальний, перевірка всіх чотирьох валют призведе до дублювання депозиту за якомось з транспортів, а це немалі витрати часу. Це лише декілька прикладів помилок, які можуть бути виявлені за допомогою Error Guessing.

Використання «Equivalence Partitioning» допомагає зменшити кількість тестів, які потрібно виконати, при цьому ефективно перевіряючи різні сценарії використання програми. Перевірка як функціональних, так і нефункціональних вимог системи. Далі ми запускаємо інструмент завантаживши файл з тестовими даними (інструкція до інструменту пояснює, як це зробити). Застосуймо цю техніку до такої фічі як Notifications Settings у Slack. Я виділила три класи еквівалентності, які стосуються цього випадку. Цю тему я почала вивчати самостійно і як новачок стикнулася з її об’ємністю та складністю.