Руководство для тестировщика

Научитесь: Профессия Инженер по тестированию
Узнать больше

Работа тестировщика входит в пятерку самых популярных работ в сфере IT, согласно статистике за 2020 год. Рынок растет очень быстро, а IT-компании постоянно создают новые команды тестировщиков. А вот еще немного впечатляющей статистики – на тестирование уходит 50% всего времени и более 50% общей стоимости любого проекта по созданию софта. А это приличный бюджет. Это означает, что налаживание процессов тестирования позволит сэкономить не только время, но и деньги.

Сегодня тестированию обучают в некоторых университетах. Но поскольку это все еще молодая отрасль, будущие специалисты предпочитают знакомиться с инструментами для тестирования программного обеспечения на онлайн-курсах. Онлайн-курсы и самообразование – это самый короткий способ изучить тестирование и начать новую жизнь в профессии. Наше руководство содержит краткий гид по основным инструментам тестирования программного обеспечения.

Тестирование является важнейшим методом контроля качества. Под качеством программного обеспечения мы имеем в виду соответствие программного обеспечения заявленным и предполагаемым требованиям. Основная цель тестирования программного обеспечения состоит в проверке совпадений между фактическими и ожидаемыми характеристиками программы. Ручное и автоматическое тестирование – это два наиболее известных типа тестирования программного обеспечения. Оба типа моделируют возможные сценарии действий пользователей и проверяют, выполняются ли при этом требования. Но в чем разница между ними?

Типы тестирования

И ручное, и автоматическое тестирование являются частью контроля качества в процессе разработки программного обеспечения. Ручное тестирование подразумевает выполнение задокументированной процедуры. Устанавливается порядок проведения тестов и приводится список параметров. Поскольку процедуру выполняет человек, в ней могут содержаться заданные по умолчанию значения и ссылки на информацию, хранящуюся в другом документе.

Автоматизированная тестировка программного обеспечения снижает стоимость тестирования. На автоматизированную тестировку и устранение дефектов также уходит меньше времени, а инструменты по автоматизации снижают риски. Однако все перечисленное не значит, что автоматическое тестирование является универсальным решением. Если скрипты не включены в регрессионную или непрерывную интеграцию, предпочтительнее использовать ручную тестировку. Автоматизированная тестировка не подойдет, если скрипты временные или если автоматизация скриптов слишком сложная.

Выбор инструмента и способа тестирования зависит от ваших целей и от желаемого уровня тестирования.  

А какие еще есть типы тестов?

При классификации типов тестирования можно использовать несколько подходов. Различают методы статического и динамического тестирования, в рамках которых используются разные методы.

При статическом тестирование не выполняется программный код. Статические методы тестирования могут быть как ручными, так и автоматическими. Их используют на ранней стадии жизненного цикла программного обеспечения и они являются важной частью процесса проверки качества. В некоторых случаях можно даже обойтись без использования компьютера, например, при проверке требований.

Динамическое тестирование – это метод, направленный на проверку функциональности программы. Он требует выполнения кода. Этот тип тестирования включает фактическую работу программы и определение ее функциональности для проверки того, оправдываются ли требования. Динамический тип тестирования направлен на тестировку программного обеспечения в режиме реального времени посредством предоставления входной информации и изучения результирующего поведения приложения.

Методы тестирования

Тестирование методом «белого ящика» и тестирование методом «черного ящика» – это ключевые методы тестирования. Разница между ними определяется наличием или отсутствием у тестировщика доступа к исходному коду программного обеспечения. В некоторых случаях он есть, в остальных тестирование выполняется через пользовательский интерфейс или интерфейс программного обеспечения, предоставленный модулем. Тестирование «белого ящика» типично для модульного тестирования, когда тестируются только определенные части системы. Это обеспечивает работоспособность и устойчивость компонентов системы. При тестировании «черного ящика» у тестировщика есть доступ к программному обеспечению только через интерфейсы, которые доступны заказчику и пользователю.

При тестировании методом «черного ящика» тестировщик знает только то, что приложение должно делать. В то же время он не может заглянуть внутрь и увидеть, как начальные значения преобразуются в окончательные. Тестирование методом «черного ящика» основано исключительно на внешних интерфейсах системы. Такой метод не требует знания внутренней структуры или всей системы.

Этот тип тестирования подразумевает процедуру написания или выбора тестовых примеров на основе анализа функциональной или нефункциональной спецификации компонента или системы без знания ее внутренней структуры. Тестирование методом «черного ящика» выполняется с использованием спецификаций или других документов, которые описывают системные требования.

При тестировании методом «белого ящика» у тестировщика есть доступ к исходному коду приложения, он может изучить его и получить определенные подсказки. В этом случае он видит, как начальные значения преобразуются в окончательные. Тестирование методом «белого ящика» предполагает, что тестировщик знает внутреннюю структуру или устройство системы. Тестировщик выбирает входные значения на основе знаний о коде, который будет их обрабатывать. Знание возможностей тестируемой программы является обязательным для тестирования методом «белого ящика». Это тестирование, основанное на анализе внутренней структуры.

Как тестирование белого ящика, так и тестирование черного ящика предполагают, что код выполняется. Единственное отличие состоит в информации, предоставленной тестировщику. В обоих случаях мы имеем дело с динамическим тестированием. При статическом тестировании программный код не выполняется. В основе анализа программы лежит исходный код, рассчитанный вручную или проанализированный специальными инструментами.

Уровни тестирования

Что касается уровней тестирования, существует модульное тестирование, интегральное тестирование, системное тестирование и приемочное тестирование. Модульное тестирование позволяет проверять правильность отдельных модулей исходного кода программы. Оно включает написание тестов для каждой нетривиальной функции или метода. Это позволяет тестировщику быстро проверить, не привело ли следующее изменение в коде к регрессу, то есть не вызвало ли оно ошибки в уже протестированных частях программы. Более того, это облегчает выявление и устранение таких ошибок. Модульное тестирование – это тестирование отдельных модулей и компонентов программы. Обычно его выполняют сами программисты, это своего рода самопроверка. Обнаруженные таким образом дефекты немедленно исправляются.

Интегральное тестирование предназначено для проверки связи между компонентами, а также взаимодействия с различными частями системы. Есть разные уровни интегрального тестирования – тестирование компонентов интеграции и тестирование системной интеграции. Интеграция снизу вверх касается всех низкоуровневых модулей, процедур и функций, которые собираются вместе и затем тестируются. Такой подход считается удобным, если все или почти все модули разработанного уровня готовы. Интеграция сверху вниз подразумевает тестирование высокоуровневых модулей. Низкоуровневые модули добавляются один за другим.

Системное тестирование проводится на полной интегрированной системе. Его основная цель – проверить, соответствует ли система требованиям. Оно относится к тестированию методом «черного ящика» и, следовательно, не требует знания внутренней структуры. Системное тестирование делится на альфа-тестирование и бета-тестирование.

Приемочное тестирование – это процесс тестирования, направленный на определение того, соответствует ли система критериям приема. Решение касательно приема принимает заказчик или другое уполномоченное лицо. Приемочное тестирование проходит на этапе релиза продукта, так как его цель – определить готовность продукта. Для этого нужно пройти ряд тестовых сценариев и кейсов на основе спецификации требований к программному обеспечению. Такое тестирование является заключительным этапом перед запуском.

Итак, с чего начать изучение тестирования программного обеспечения? Лучший способ стать тестером – пройти онлайн-курс, который поможет вам понять, как создается программное обеспечение, с какими трудностями сталкиваются программисты и как выглядит процесс устранения ошибок. Наши курсы предоставляют качественное обучение от лучших инструкторов, поэтому присоединяйтесь к нам. Мы поможем вам изучить основы тестировки программного обеспечения и начать карьеру в IT.

Запись на курс Manual QA

‍

‍

В этом большом бесплатном учебнике по тестированию, ты выучишь основы тестирования программного обеспечения. Все материалы взяты с нашего сайта и расположены последовательно друг за другом — от основ до продвинутых тем. Учебник постоянно обновляется и дополняется новыми статьями.

Нужны ли мне какие-то знания для работы с учебником?

Учебник рассчитан на начинающих тестировщиков с небольшим опытом в QA (или вообще без опыта).

Содержание

• 👶 Основы тестирования
• ↔️ Типы тестирования
• 📄 Тестовая документация
• 📁 Тест-кейсы
• 🛠️ Техники тест-дизайна
• 🐞 Все о багах
• ⚙️ Автоматизация
• 🚄 Тестирование производительности
•  📱 Тестирование мобильных приложений
• 🛠️ Инструменты тестировщика
• 💬 Софт-скиллы
• 👨‍💼 Собеседование
• 🔥 Интересное
• ✅ Тесты для самопроверки
• 📚 Чтение для отдыха

👶 Основы тестирования

Основы профессии — разбираемся с основополагающими понятиями — что такое тестирование, из каких видов оно состоит. Смотрим, на каких этапах разработки применяется, изучаем этапы и уровни.

↔️ Типы тестирования

Разбираемся в видах и типах тестирования — важно понимать особенности каждого из них. Чем отличается модульное тестирование от smoke-тестирования? Что такое альфа-, бетта- тестирование? Чем функциональное тестирование отличается от нефункционального? Ответы на все эти и многие другие вопросы в статьях ниже.

📄 Тестовая документация

Все о тестовой документации и о том, как ее писать.

📁 Тест-кейсы

Руководства по написанию тест-кейсов.

Техники тест-дизайна

Классы эквивалентности, таблицы решений, предугадывание ошибок и многое другое — раздел о техниках тестирования.

🐞 Баги

Баги, их классификация и баг-репорты — обо всем этом в разделе.

⚙️ Автоматизация

🚄 Тестирование производительности

📱 Тестирование мобильных приложений

Обучающие материалы по мобильному тестированию.

🛠️ Инструменты

💬 Софт-скиллы

👨‍💼 Собеседование

Материалы для подготовки к собеседованиям — вопросы и ответы по самым разным темам.

🔥 Интересное

✅ Тесты для самопроверки

📚 Чтиво

Интересные статьи по теме. Смотрим, почему QA-инженеры нужны и к каким багам приводит некачественное тестирование.

Библиотека тестировщика: обзор полезных книг по тестированию ПО

В каждой профессии есть книги из категории «маст хэв» — те, которые любой уважающий себя специалист должен обязательно прочитать в целях самообразования. Какая полезная книга помогла бы углубить профессиональные знания тестировщика? Представляем обзор изданий, которые наверняка займут достойное место в библиотеке.

Если бы мы не писали обзор книг, а составляли их рейтинг, то на первое место с большим отрывом обязательно поставили бы книгу Ольги Назиной «Что такое тестирование. Курс молодого бойца». Да, это издание — для начинающих, для тех, кто хочет «вкатиться в профессию», но именно в этой нише конкурентов у нее практически нет.

И дело даже не в том, что книга последовательно, шаг за шагом вводит читателя в мир тестирования программ, а в том, как именно она это делает. При чтении книги невозможно отделаться от ощущения, что о секретах профессии тебе рассказывает лучший друг — настолько простым и понятным языком изложен материал. Автор приводит интересные примеры и истории из собственной практики, приводит аналогии, шутит, причем делает это действительно весело и непринужденно: вы не найдете здесь того натужного юмора, который встречается иногда в других технических книгах.

Но главное — картинки. Их очень много, из-за чего книга немного напоминает комикс, и предназначены они не столько для развлечения читателя (хотя картинки веселые!), сколько для лучшего запоминания материала. Главный герой книги Ольги Назиной — тестировщица по имени Катька, которая чуть ли не на каждой странице сталкивается с различными профессиональными задачами, решает сложные проблемы, общается с коллегами, разработчиками, пользователями… В общем, старается объяснить «на пальцах» сложные вещи — как изучить техническое задание, составить тест-кейсы и чек-листы, выделить классы эквивалентности, работать с баг-трекерами, автоматизировать тестирование, писать отчеты… В конце каждой главы приводятся вопросы для самопроверки и практические задания, которые можно выполнить, чтобы набить руку. Если набраться терпения пройти их все, получится портфолио, которое пригодится, например, при устройстве на работу.

В общем, это написанная простым и доходчивым языком книга-тренинг, выгодно отличающаяся по стилю и содержанию от классической технической литературы. К слову, автор этой замечательной книги есть на Хабре, и с ней вполне можно пообщаться — Ольга Назина охотно отвечает на вопросы читателей. Даже на самые заковыристые.

***

Еще одно полезное издание для начинающих — книга Билла Лабуна «Дружеское знакомство с тестированием программ». Она намного тоньше и лаконичней предыдущей, а форма арбуза на обложке, вероятно, намекает на форму головы неофита, которую та обретает при попытке усвоить кучу непонятных терминов из сферы тестирования. Все эти «непонятки» и призвана разъяснить книга: она рассказывает об основах профессии, о видах тестирования — дымовом, приемочном и исследовательском, о юнит-тестировании, о попарном, комбинаторном, стохастическом тестировании и тестировании на основе свойств, о тестировании производительности и безопасности. Отдельная глава посвящена приемам разработки ПО через тестирование. 

Сам Билл Лабун — признанный эксперт в сфере качества ПО и преподаватель, обучающий студентов на факультете компьютерных технологий Университета Питтсбурга.

В общем, эта книга чуть более академична по сравнению с предыдущей и представляет собой неплохое справочное пособие по классификации тестирования, которое имеет смысл держать под рукой просто на всякий случай.

***

Обе упомянутые выше книги можно найти в книжных магазинах — разумеется, за деньги. Но есть и достойные бесплатные издания по этой тематике. Одно из них — это книга Святослава Куликова «Тестирование программного обеспечения. Базовый курс».

Да, это тоже пособие для начинающих, но, что называется, из категории «маст хэв». Книга постоянно обновляется, а ее автор обладает более чем десятилетним опытом обучения специалистов. Это издание часто рекомендуют новичкам, и не зря: здесь приводится разъяснение базовой терминологии, подробно описаны необходимые тестировщику навыки, дается классификация тестирования (есть даже здоровенная таблица с перечислением и разъяснением всех видов тестов). Кроме того, в книге кратко описаны правила составления тест-кейсов и чек-листов, приведены типичные ошибки при их разработке, и все это изложено доходчивым разговорным языком (правда, местами автор все же скатывается в академический стиль, но лишь местами). Очень важно, что за счет регулярного обновления книга не теряет своей актуальности.

***

Если вам лень читать толстые фолианты из категории «многабукв», у нас есть хорошие новости: в книге Романа Савина «Тестирование dot com» букв мало — она небольшая, но это ничуть не влияет в худшую сторону на ее содержательность. Книгу можно купить на бумаге или раздобыть в электронном виде — она присутствует на всех популярных литературных площадках.

***

Книга Джеймса Уиттакера «Как тестируют в Google» вышла в свет уже довольно давно — в 2014 году, — но своей актуальности тем не менее не утратила. Это издание скорее заинтересует опытных тестировщиков, стремящихся изучить подход к тестированию в известной на весь мир корпорации. Если кратко — за качество продукта там отвечают все. Если не кратко — читайте книгу, процесс тестирования продуктов в Google там описан довольно подробно. При этом функции тестировщиков и разработчиков в корпорации совмещены: специалисты по тестированию сами улучшают продукт наравне с девелоперами, а программисты пишут юнит-тесты для своего кода. Зато никто не считает тестлаб вольером для дрессированных мартышек, которые только и умеют, что запускать автотесты. В общем, передовой опыт самой крутой IT-компании планеты наверняка будет интересен, хотя в небольших коллективах далеко не всегда применим на практике.

***

«Ключевые процессы тестирования» Рекса Блэка — это серьезное издание для серьезных людей, то есть для профессионалов, которые, что называется, «глубоко в теме». Книга сложная и тяжелая для восприятия, но если запастись корвалолом терпением и осилить её целиком, на страницах издания можно найти много ценной и полезной информации.

Автор описывает процессы тестирования, свойственные в первую очередь крупным командам и корпорациям, которые при работе над маленькими и скромными проектами не всегда применимы. Зато рассказ о фундаментальных подходах позволяет понять, «как это работает у больших ребят», и, возможно, перенять что-то полезное. В тексте встречаются занимательные и временами забавные истории о тест-менеджере Джамале, работающем над проектом «Суматра», которые периодически разбавляют довольно монотонное повествование. Описаны все стадии развития этого проекта — от идеи до завершения, что позволяет составить наглядное представление об этапах тестирования, да и вообще о жизненном цикле разработки сложного продукта.

***

Что ж, теперь от российских изданий давайте перейдем к англоязычным. Среди которых нельзя не отметить книгу Ли Копланда (Lee Copeland) A Practitioner’s Guide to Software Test Design, по мнению множества специалистов — лучшую книгу по тест-дизайну из представленных сегодня на рынке. Несмотря на то что эта книга на английском, написана она довольно простым языком, поэтому серьезных трудностей в процессе чтения представлять не должна. В книге подробно описаны два метода тестирования методом «белого ящика», семь — методом «черного ящика», приведено множество примеров тест-кейсов на все случаи жизни. В конце каждой главы даны вопросы для самопроверки. Специалисты по тестированию, прочитавшие это издание, единодушны: книга безусловно заслуживает того, чтобы стать настольной для всех, кто желает изучить тест-дизайн и углубить свои профессиональные знания.

***

Рон Петтон (Ron Patton), Software Testing — еще одна книга, содержащая огромный объем полезной информации и вопросы для самопроверки в конце каждого раздела. Рассчитана на начинающих и охватывает весь спектр основ тестирования ПО. Каждая тема в книге Петтона рассматривается очень подробно (в чем ее несомненное достоинство); это поможет новичкам освоить азы, а профессионалам — лучше уложить в голове технологические подходы к тестированию и описанные на страницах издания методики. Впрочем, добравшись до конца Software Testing, новички, скорее всего, уже перестанут быть таковыми, поскольку обретут необходимый запас теоретических знаний — останется только наработать практические навыки. В общем, книга крайне полезная, особенно для тех, кто находится на старте карьеры.

***

Кристин Жаквони (Kristin Jackvony), The Complete Software Tester: Concepts, Skills, and Strategies for High-Quality Testing — книга не только о тестировании, но и о тестировщиках, о тех знаниях и навыках, которыми должен обладать такой специалист. В издании подробно рассматриваются и практические аспекты: ручное разведочное тестирование, тестирование API, тестирование безопасности, — описаны основы автоматизации тестирования, рассказано об использовании инструментов для контроля версий. Автор дает читателю советы по созданию планов тестирования, формулированию стратегий и эффективной работе в команде. Ну и по традиции в конце каждой главы даются вопросы для самопроверки.

Самое интересное, что для подписчиков Kindle Direct книга бесплатна, поэтому если у вас есть учётка на Amazon, вы сможете насладиться творчеством Кристин, не потратив ни цента. Впрочем, по имеющейся у нас информации, одно из российских издательств сейчас готовится выпустить эту работу на русском языке. Так что, если вы готовы немного подождать, очень скоро можно будет ознакомиться с этой замечательной книгой в переводе.

***

Безусловно, мы рассмотрели в этом обзоре далеко не все доступные сегодня читателям издания по тестированию программного обеспечения. Мы не упомянули довольно популярные How to Break Web Software и How to Break Software Security (James A. Whittaker), Perfect Software: And Other Illusions about Testing (Gerald M. Weinberg), Exploratory Software Testing (James Whittaker). Однако описанные нами книги вполне могут занять достойное место в библиотеке тестировщиков — это тот «обязательный и необходимый» минимум, который следует прочитать всем, кто связан с этой профессией. Если у вас есть любимые книги по тестированию, о которых мы забыли рассказать, — обязательно делитесь своими отзывами в комментариях!