Как новички, так и опытные специалисты по исследовательскому тестированию могут извлечь пользу из курсов по совершенствованию своих навыков. Это включает в себя выяснение того, как подходить к новому программному обеспечению. Для достижения наилучших результатов очень важно, чтобы группа тестирования договорилась о том, кто из ее членов будет проводить каждый тест, исходя из их соответствующих навыков и сильных сторон. Testiny специализируется на ручном разведочном тестировании и предлагает интеллектуальный редактор, позволяющий тестировщикам разрабатывать проверки с использованием древовидной структуры для максимальной гибкости. Azure Test Plans является ключевой частью платформы Azure от Microsoft и позволяет тестировщикам собирать богатые данные по многим сценариям. Различные варианты сторонних производителей предлагают свои уникальные возможности, поэтому выбор команды может определить успех роботизированной автоматизации процессов; они должны рассмотреть все возможные варианты.
Это этап исследования, на котором тестировщик получает всю необходимую информацию для разработки широкого спектра полезных тестов. Тестировщики начинают с глубокого понимания программного обеспечения и его функциональности — критического анализа, чтобы определить, как оно сочетается друг с другом. Они также могут отвечать за приобретение программного обеспечения для команд, которое может упростить или даже автоматизировать тесты.
Планы тестирования Azure
Не существует четких ограничений на типы проверок, которые относятся к разведочному тестированию; этот подход может охватывать все аспекты программного обеспечения, включая код. — LinkedIn’s Exploratory Testing; здесь показано, как современное тестирование программного обеспечения использует исследовательские проверки. — Полный курс тестирования программного обеспечения 2023 от Udemy; это обучение широкому тестированию программного обеспечения в течение 28 часов.
В ходе тестирования каждый тестировщик знает кластер, содержащий максимум багов приложения. Исследовательское тестирование должно учитывать и фиксировать все, что может повлиять на тестирование. Это может варьировать в зависимости от таких факторов, как, например, WiFi/мобильная связь, сила сигнала, уровень заряда батареи, или даже звуковые помехи. Отличный тестировщик приветствует необходимость дополнительного исследования и рассматривает все возможные пути, не привязываясь к одному фиксированному решению.
Когда можно применять исследовательское тестирование в чистом виде
Например, в прошлой версии системы управления больницей модуль отчетов зависал и выдавал ошибки, и возможно есть смысл сейчас протестировать его в первую очередь. В процессе вовсе не исключается применение формальных методик — эквивалентных классов и граничных значений, предугадывания ошибок, таблицы решений, попарного тестирования и других. Планирование тестовых операций идет в процессе их проведения (параллельно). Высокая скорость начала тестирования (начинаем тестировать сразу, как получаем задачу – план составлять не нужно). Одна из практик тестирования гласит, что прежде, чем исправлять найденную ошибку, следует создать тест, проверяющий наличие этой ошибки.
Исследовательское тестирование часто сочетают с другими методиками, дополняя их. Это тестирование охватывает все виды тестирования и охватывает различные сценарии и случаи. Он включает в себя процесс расследования, который помогает найти больше ошибок, чем обычное тестирование. Эта сессия призывает тестировщиков реагировать на ответ системы и готовиться к правильному результату.
Исследовательское тестирование на основе сценариев
Вы не тратите время на создание тестов, на их запись, как при скриптовом подходе, ничего не актуализируете, не тратите время на то, чтобы показать записанные тесты руководителю и получить согласование. Довольно часто тестировщики предпочитают проставлять отметки о проверенных функциях и указывать на выявленные дефекты не сразу, а в конце дня, воспринимая данный ритуал как отчет о собственной работе, а не о состоянии продукта. В качестве аргумента они приводят тезис о том, что при исследовательском подходе невозможно точно предсказать, насколько протестирована та или иная функция, потому что каждый последующий тест основан на результатах предыдущего. Поэтому прелесть исследовательского тестирования заключается именно в его гибкости и возможности выстроить процесс таким образом, чтобы удовлетворялись нужды как проекта в целом, так и всех его участников.
- Это тестирует способность сайта создавать новые профили пользователей и проверяет, что пользователи не могут получить доступ к административным функциям.
- Если проверки требуют автоматизации, тестировщики могут настроить его на ночную работу или самостоятельно контролировать его в течение дня.
- Организации, которые в значительной степени полагаются на автоматизацию на каждом этапе, могут иметь неполное представление о программном обеспечении.
- Основные пункты из которых может состоять тест-план перечислены в стандарте IEEE 829.
- Тестировщик работает не только для того, чтобы убедиться, что все функции приложения работают как надо, но и для того, чтобы убедиться, что пользовательская база может легко с ним работать.
Автоматизированное разведочное тестирование усугубляет эту экономию, помогая компаниям проверять последние итерации своих приложений гораздо быстрее, потенциально за одну ночь. Исследовательские проверки дают быстрые, пригодные для использования результаты, и разработчики могут внести необходимые изменения в рамках следующего спринта. Команды тестирования программного обеспечения могут использовать эмуляторы для облегчения исследовательских проверок; это может быть полезно, но редко отражает практическую среду пользователя. Некоторые компании до сих пор exploratory testing это с трудом внедряют автоматизацию, в то время как другие чрезмерно используют ее, даже когда ручные перспективы могут быть более выгодными. Баланс этих проверок позволяет команде тестирования охватить больше баз и обеспечить качество всего приложения, включая более субъективные аспекты, такие как интерфейс программного обеспечения. Первый шаг исследовательского тестирования заключается в том, чтобы соответствующие члены команды поняли, как они могут подойти к этим проверкам, например, классифицировать общие неисправности и провести анализ первопричины.
Пассивное исследовательское тестирование
Они также могут стать обновлением документации, например, новыми требованиями, изменениями в пользовательской документации, новой инструкцией для DevOps и т. В целом, улучшение навыков QA-команды всегда является одной из целей QA-подразделения. Используя исследовательское тестирование, инженеры задействуют интуицию и опыт, накопленные ранее и привыкают постоянно анализировать продукт. В руках опытных тестировщиков является еще одним, достаточно мощным способом проверки полноты и точности формальных методик, особенно что касается критических точек приложения. Результаты исследовательского тестирования не обязательно радикально отличаются от тех, которые мы получаем с помощью сценарного тестирования и оба этих подхода к тестированию являются полностью совместимыми. Такие компании, как Nortel и Microsoft обычно используют оба подхода в одном проекте.
Исследовательское тестирование может стать значительным операционным расходом, если вы используете модель премиум-класса, но не у каждой компании или команды разработчиков программного обеспечения есть на это деньги. Выбор оптимального программного обеспечения стороннего производителя часто зависит от конкретных требований фирмы. Этот вариант полностью фокусируется на перспективе пользователя и предлагает централизованный центр результатов для обновления информации другими тестировщиками. Именно поэтому многие исследовательские подходы предполагают объединение тестировщиков в пары или даже прямую запись экрана тестировщика, чтобы получить более четкое понимание проблем и их точных причин. Разведочное тестирование быстрее, чем многие другие виды тестирования, но реальность сроков проекта означает, что все еще существуют ограничения на количество тестов, которые команда может провести. Выяснение того, какие тесты лучше всего работают при ручной проверке, а какие выиграют от автоматизации, требует времени, но позволяет командам тестировать гораздо эффективнее.
НЕКОТОРЫЕ ТЕХНИКИ ТЕСТ-ДИЗАЙНА
Хорошее знание программного обеспечения позволяет тестировщикам выйти за рамки обычных параметров тестирования. Автоматизированные исследовательские проверки ищут только ошибки и метрики в приложении; ручные тестировщики могут вместо этого осмотреть программное обеспечение и предложить свой собственный исчерпывающий отзыв. Исследовательское тестирование — это в основном поиск новых способов тестирования приложения в процессе его понимания; иногда это может означать, что один тест ведет к другому, давая идеи тестировщику. Ручное исследовательское тестирование позволяет проводить более широкий спектр специальных проверок. Хотя это может занять больше времени из-за того, что человеческие тестеры медленнее компьютеров, ручная проверка может сыграть важную роль в определении пользовательского опыта. Подход, основанный на стратегии, фокусируется в основном на функциональности (и внутренней работе) программного обеспечения, не рассматривая возможные сценарии, которые могут привести пользователя к возникновению проблем.
Несбалансированное ручное/автоматическое тестирование
Дайте победителю приз и подойдите к своему столу и выясните, правда ли это. В качестве варианта этой игры предложите командам провести мозговой штурм по этому сценарию и найти способ, которым это может произойти в производственной среде. Но ошибка с описанием «Холодильник ломается, если мы кладем в него что-нибудь горячее (300–400 F) более двадцати минут», по крайней мере, будет рассматриваться. Риски будут оцениваться и, скорее всего, задокументированы как изменение требований или инструкций пользователя. Я часто говорю, что если я мог что-то сделать с программой, то это сможет сделать кто-то или что-то еще.