Исследовательское тестирование — очень важный и очень практичный тип тестирования, который экономит время и представляет собой аналитические и логические выводы тестировщика. Это один из наиболее часто используемых методов в Agile-разработке, где документации не придается большого значения, и от команды ожидают более быстрых выпусков. Хорошо проведенные исследовательские тесты включают в себя надежную документацию, к которой разработчики и будущие тестировщики обращаются при создании новых итераций программного обеспечения. Расширение для браузера, предлагающее тщательное исследовательское тестирование, Bug Magnet позволяет тестировщикам проверять краевые случаи и другие проблемные значения.
Специальные тесты обычно не имеют определенных конечных целей, кроме как подтолкнуть программное обеспечение к тому, что оно может. Специальное тестирование часто также предполагает предварительное знание программного обеспечения и его функций, в то время как исследовательское тестирование включает изучение приложения в свои обычные процессы. Например, программное обеспечение не может надежно обеспечить обратную связь по пользовательским интерфейсам или тестам пользовательского опыта. Тестировщики могут получить хорошее представление о том, как приложение работает на практике, только если они будут тестировать его вручную. Это означает, что и разработчики, и команды тестирования должны рассмотреть возможность включения в свои проверки хотя бы некоторой степени ручного разведочного тестирования. Исследовательское тестирование особенно полезно, поскольку оно отражает то, как пользователи могут использовать программное обеспечение.
Развенчание мифов или как применять исследовательское тестирование
Большинство пользователей находят ошибки и проблемы случайно, поэтому такие незаписанные процессы могут помочь тестировщикам найти проблемы, которые заранее определенные проверки могут не выявить. Качество разведочного тестирования команды часто зависит от мастерства отдельных тестировщиков, поскольку проверки требуют творческого подхода и глубокого понимания программного обеспечения. Это процесс непрерывного открытия — процесс, в котором тестировщики используют дедуктивные рассуждения, чтобы направлять свою общую методику. В итоге он превращается в прекрасный отчет, отражающий тестовое покрытие. ИИ и машинное обучение позволяют нам автоматизировать все больше и больше рутинных задач, поэтому у QA остается больше времени для более увлекательного и сложного тестирования. Тема исследовательского тестирования была действительно актуальной пару лет назад, и похоже, что она снова набирает обороты.
- Исследовательские проверки дают быстрые, пригодные для использования результаты, и разработчики могут внести необходимые изменения в рамках следующего спринта.
- В задачах классификации, алгоритм обучения с учителем изучает обучающий набор данных для обнаружения, или обучения, оптимальной комбинации переменных, для генерирования хорошей прогнозной модели.
- Как было сказано выше, кейсов на проекте может быть очень большое количество и иногда, из-за горящих сроков, команда просто не успевает актуализировать тест-кейсы.
- В качестве ресурсов у нас был один опытный тестировщик и один стажер.
В каждом приложении есть функции или компоненты, которые пересекаются с другими. По мере усложнения программного обеспечения возрастает вероятность появления ошибок; это может потребовать более тщательного тестирования. Команда должна активно работать, чтобы выяснить, какие компоненты нуждаются в дополнительной помощи. В качестве альтернативы они могут выбрать варианты без этого ограничения и те, которые способны вместить масштаб группы тестирования. Это может сделать еще более целесообразным объединение специалистов по исследовательскому тестированию в пары для обеспечения более точных результатов — команде, естественно, потребуется меньше пользовательских профилей.
Системы непрерывной интеграции[править | править код]
Тесты на основе сеансов также повышают производительность и предоставляют тестировщику четкие метрики и информацию об устранении неполадок. Опыт также может повлиять на их способность определять наиболее полезные тесты. Когда у вас в команде специалисты с высокой квалификацией, то есть когда вы уверены, что не будет “манки-кликания”, а будет осознанное исследование продукта со всеми вытекающими. Если у нас есть море вариантов, то мы легко можем запутаться или не покрыть все возможные варианты тест-кейсами. Для техники «Парное тестирование» нужно открыть любой интернет-магазин и каталог товаров. Так я буду проходиться по каждой колонке этой таблицы, пока не заполню все 16 результатов.
Пару дней назад была статья об исследовательском тестировании, и я хотел бы продолжить тему описанием одного из инструментов, поддерживающих процесс такого тестирования. Создавая мастер-тест-план, включайте в него исследовательское тестирование. Одно из ключевых достоинств исследовательского тестирования в том, что оно помогает бороться с когнитивными искажениями и концентрироваться на различных аспектах приложения. Проверяется то, что исправление багов, а также любые изменения в коде приложения, не повлияли на другие модули ПО и не вызвали новых багов.
Творческие, интуитивные тестировщики
Техники тест-дизайна — это правила и подходы, которые помогают создавать грамотные тест-кейсы. Они помогают нам тестировать, не просто переходя со страницы на страницу, а объясняют, почему мы вводим определенные значения и какие конкретно значения нужно вводить. Сторонние расширения VS Code могут помочь вам стать лучшим инженером-программистом, автоматизируя повторяющиеся задачи, улучшая качество кода, улучшая совместную работу и предоставляя учебные ресурсы. Используя расширения для упрощения рабочего процесса, оптимизации кода и использования новых технологий, вы можете стать более эффективным, продуктивным и знающим разработчиком. Пройдите старые регрессионные тесты и попытайтесь найти новый ожидаемый результат на каждом этапе в них.
Бывает, конечно, зачастую не так часто, вы успеваете в срок и остается некоторое количество времени, и чтобы убедиться, что вы внимательно прошлись по всем тест-кейсам, что ничего не упустили, применяют исследовательское тестирование. При значительном обновлении приложения повторное тестирование его основных функций становится необходимым, чтобы убедиться, что эти дополнения не оказывают негативного влияния на ранее существовавшие функции. — SDET-QA Automation Techie, где есть несколько исчерпывающих видеороликов о различных подходах к тестированию.
Какие тест-кейсы мы могли создать из упомянутых примеров?
Вокруг этого все еще есть много вопросов, например, когда проводить исследовательское тестирование, какие подходы являются наиболее популярными и в чем разница между исследовательским и специальным тестированием. Ad-hoc-тестирование является более хаотичным и интуитивным, и его может выполнять любой человек. Исследовательское — желательно опытный тестировщик, разработчик, бизнес-аналитик. По книге Канера «Testing Computer Software», исследовательское тестирование — «это просто более вдумчивый подход к ad-hoc-тестированию». Для того чтобы получить более стабильные результаты и использовать все значимые данные для обучения, набор данных может быть повторно разделен на несколько обучающих и проверочных наборов данных. Для подтверждения производительности модели обычно используются дополнительные тестовые наборы данных, удерживаемые для использования в перекрёстной проверке.
Очень важно, чтобы компания набирала тестировщиков с разнообразными и надежными навыками, способствующими эффективной автоматизации. Аналогичным образом, автоматизированные процедуры разведочного тестирования могут обеспечить огромные преимущества для приложения наряду с общим проектом. Как только команда поймет программное обеспечение для автоматизации, они смогут адаптировать его к широкому кругу задач.
Подходы
Исследуйте, когда вы знаете об определенных рисках или изменениях, которые могут их вызвать. Далее, изучив функциональность и слабые места приложения, можно создавать формальные тест-кейсы. В программной инженерии проводится исследовательское тестирование, чтобы преодолеть ограничения скриптового тестирования. ВЗГЛЯДНОЕ ИСПЫТАНИЕ — это тип тестирования программного обеспечения, при котором контрольные примеры не создаются заранее, а тестеры проверяют систему на лету. Они могут записать идеи о том, что тестировать перед выполнением теста. В центре исследовательского тестирования больше внимания уделяется тестированию как «мыслительному» виду деятельности.
Исследовательское тестирование на основе сценариев
Такой вид тестирования может не предусматриваться в тест плане, а тест-кейсы выполняются и модифицируются динамически. Эффективность такого тестирования напрямую зависит от опыта тестировщика ранее имевшим дело с этим приложением, платформой, знанием мест скопления возможных багов и рисками которые относятся к конкретному продукту. Тестировщики exploratory testing это могут успешно применять исследовательский подход и при разработке новых тестов в начале итерации, и при анализе уже завершенных тестов, и даже как вариант дымового тестирования, избегая лишних затрат времени. Изучение внутренней работы этого программного обеспечения может быть совместным процессом, обеспечивающим лучшее понимание в команде.