друзья привет меня зовут владимир завертай love я руководитель и главный бармалей study интернат решение сибирь x вот уже пять лет прошло с тех пор как мы выпустили курса правления digital проектами в эфир и более пяти тысяч человек успешно закончили этот курс сегодня мы делаем шикарный подарок мы выкладываем курс общий доступ смотрите наслаждайтесь и изучайте материала до много поменялось за прошедшее время и те обновления те новые данные сведения которые мы накопили в том числе по продуктовой разработки нас уже есть такая экспертиза очень классная мы оформим и выпуском виде отдельной книжки которая сейчас находится на редактуре в
издательстве бамбура и ожидаю выход книги в эфир надеюсь в середине 2022 года поэтому следите за новостями более свежие материалы будут в текстовом виде успехов добрый день меня зовут екатерина мамонтова я исполнительный директор студии сибирь x работаю управление проектами в 2011 года до этого занимались тестированием и контролем качества в общей сложности запустила более 50 интернет-проектов сегодня мы будем говорить про his менеджмент релиз менеджмент эта процедура подготовки digital проекта к состоянию когда на него можно пускать реальных пользователей и не бояться за свою карму вообще запуска и постоянное развитие виджетов проектов создала несколько дисциплин и подходов к релизом
например geox continues смит играешь никакие из delivery это подходы обеспечивающей максимальную скорость поставки обновлений программного обеспечения потребителю и используется в основном очень зрелых проектах таких как facebook instagram и тому подобные одним из ключевых аспектов этих подходов является тестирование и контроль качества часто эти операции стараются автоматизировать в этом модуле я расскажу о стадиях тестирование методах и способах проверки проектов и о подводных камнях в этих процессах в том числе коснемся и автоматизации но сейчас по умолчанию будет идти речь о ручном тестирование не потому что ручной способ это самый распространенный особенным в и мобильной разработки он действительно дешевле
для небольших проектов в любых проектах его не избежать мы рассматриваем ручное тестирование потому что цель у нас сделать из вас не тестировщиков а внимательны к мелочам менеджер и сразу пример вот типовая форма обратной связи первое что я буду делать отправляя пустой работает смысле форма не отправилась я вижу ошибки валидации и их текст меня устраивает есть недочет курсор не стал первое поле форма с ошибкой это действительно мелочь хотя таких мелочей у нас чек-листе для форм и порядка 50 штук а вот штука посерьёзней форма упала кто понял что произошло можете делать полки пирожок кто знает что такое
xs атака тоже это уязвимость про которую редко задумываются многие вып разработчики но которые очень хорошо знают хакеры воруют ваши данные и ломают сайты на самом деле это очень тривиальный пример для грамотного тестировщика будут сейчас премьера и посложнее но тут важно понимать что тестирование это многошаговые процесс тестировать нужно не только готовый код на боевом сервере но и отдельные спринт и горстку а иногда даже макет для того чтобы понять ошибка или перед нами или так и задумано тестировщику нужно на что-то опираться это могут быть либо чек-листы либо утвержденные результаты предыдущих этапов например технические задания прототипы и либо
бык ноги что именно зависит от принятой вашей компании методологии и наконец опираться на здравый смысл без него никак не одно методология не заменит голову но и опираться только на нее дохлый но у каждого она своя и мы рискуем очень быстро выйти в области рационального поэтому нам нужны какие-то критерии на которые тестировщик сможет опираться и так проверка макетов на этом этапе мы сверяем макеты с перечнем функций которая запланирована к реализации такая проверка нужно не всегда рекомендуемые проводить на больших проектах где макетов и сильно больше дюжины здесь наша задача убедиться что дизайнер творческом порыве не придумал новых
лишних функций или в угоду красоте ну или по неосторожности не забыл какие то важные элементы страницы или даже целые экраны такое тоже бывает например внесли дизайнер получает постановки в письменном виде я рекомендую выполнить проверку методом светофора прямо взять и покрасить постановку в красный цвет там где сделана с ошибкой желтый где есть незначительные расхождения зеленый там где все в порядке и серые где в постановке есть вода белый цвет означает что тестировщик это место ещё не проверял красить нужно не абзацами а слово за словом почему бывает что разница в одной или двух буквах кардинально меняет смысл задачи
например если и прочитают как или это опять же к вопросу о важности мелочей вот что представляет из себя метод светофора кстати его можно использовать не только на дизайне но и на других этапах далее тестирование верстки когда макеты согласованы мы передаем их на верстку задача верстальщика грубо говоря перевести картинки в интерактивный html чтобы результат соответствовал макетом в разных браузерах или разных устройствах поэтому когда тестировщик проверяет верстку он использовать в первую очередь инструменты позволяющие прямо в браузере наложить картинку макета нас вёрст иную страницу чтобы посмотреть расхождение один из самых популярных инструментов для сопоставления макета с версткой плагин
для браузера excel . интерфейс простой загружаете макеты выбираете нужный устанавливаете прозрачность и сопоставляйте картинку с версткой казалось бы что тут сложного верстает пиксель в пиксель и будет тебе счастье но не всегда бывает так радужно представим что у вас на проекте 20 макетов с различными формами для внесения данных рисовались для скорости параллельно двумя-тремя дизайнерами по некоторым макетом были правки и доработки некоторые были приняты с первого раза вероятность того что однотипные элементы будут с идеально одинаковыми отступами друг от друга на всех макетах честно скажем крайне мало это кстати подтверждает закон брукса добавление людей опаздывающий проект его только
затянет тем не менее высоко квалифицированный менеджер должен быть работать и с этим откровенно хороших вариантов тут нет я рекомендую делать общий гайдлайн иллюстрирующие основные элементы и отступы и дальше мы не требуем соответствие горстка с макетами пиксель в пиксель посмотреть всегда должен оставаться здравый смысл если отступ от заголовка до поля 20 пикселей в гайдлайн и он должен быть таким во всех аналогичных местах даже если на каком-то макете он равен 17 а на каком то 22 тестировщик обязан будет написать про визуальную не стыковка с макетом в идеале сославшись на гайдлайн верстальщик это исправить ну а в случае
споров финальное решение в зоне ответственности менеджера что еще важно проверить валидность кода с помощью валидаторов проверяем страниц или соответствие стандартам например html5 дальше как грузится страница медленном канале ничего не прыгает ничего не расползается особенно важно проверять это на экранах со сложной тяжеловесной анимации и видео эмуляции медленного канала есть почти во всех современных браузерах адаптив проверить поведение страницы при смене разрешений мы используем как реальное устройство так и эмуляции кстати скорее всего все эти проверки придется сделать повторно когда проект будет уже собран отмечу что мы далеко не всегда уделяем верстку в отдельный этап как правило заказчики не
видит ценности в этом этапе отдельно от разработки ну и на самом деле даже очень хорошую верстку при программировании могут довольно сильно переработать например при интеграции каких-либо плагинов из топ поэтому там где идет много это рациона разработка имеет смысл забирать верстку спринт и и так разработка это как правило самые одиозные для тестирования этап и дело даже не в том что программисты допускают ошибки во время сборки проекта просто это конец конвейера здесь собираются все ошибки недочеты и про долбанные мелочи предыдущих этапов кстати у не квалифицированных менеджеров именно поэтому распространена отговорок а что во всем виновата программисты хотя
зачастую именно программисты вынуждены устранять последствия ошибок других людей в том числе невнимательность этого менеджера тестирование проекта закладывается еще на этапе планирования например если идет работа по скрам то имеет смысл привлекать тестировщика планирование sprint а это такая активность когда вся команда собирается вместе зачитываются и обсуждаются вслух постановки по тем задачи которые пойдут работу команда должна получить оценки по каждой задаче мы используем для этого методику planning покер о которой поговорим в одном из следующих моделей что важно тестировщик наравне со всеми остальными участниками спринта программистами и менеджерами принимает участие в планировании и оценки слышат обсуждение задач понимаем детали
тут мы убиваем сразу двух зайцев во-первых у всех будет одинаковое понимание задач и результатов их выполнения а во-вторых тестировщик приобретать навык оценки и декомпозиции задачи этот навык в дальнейшем понадобятся ему чтобы стать менеджером за планировались отлично дальше пишем тест кейс test key если это критерии по которым разработчик будет проверять готовность задачи этап проверки задач за собой важен так разработчики повышая собственный уровень внимательности к мелочам а в перспективе это влияет и на качество кода тест если для этого этапа очень хороши например после выполнения задачи по реализации странице корзины разработчик проверит что количество меняется корректно и обрабатываются
крайние случаи такие как вот отрицательного числа 0 вот букв кто пишет тест кейсы тестировщик и разработчик как правило это скрам мастер в команде или просто более опытный разработчик при равном уровне разработчиков любой из них больше часть из кейсов мы пишем на основе нашего полного чек-листа проверки проекта который вы получите после этого модуля но чек-лист общей он не учитывает контекст и поэтому в тест кейсов нужно прописать именно те пункты которые характерны для конкретной решаемой задачи почему пишем тест кейсы таким составом ведь место времени одного человека мы тратим драгоценные человеко-часы двоих как показывает наш опыт лишний один-два
часа разработчика на тест кейсов сэкономить время и нервы в будущем если тестировщик пишет тест кейси в одиночестве есть два основных рисков которые могут дорого стоить 1 тестировщик придумает что-то о чем прямо в задача не сказано это никто не оценивал и делать вообще не нужно последствия в лучшем случае разработчики возмутятся и прибегут к вам когда увидят этот пункт в худшем но очень начнут его делать и тратить не запланированное время например тестировщик может написать тест кейсах что форме авторизации должна работать авторизация через социальные сети которая вообще на этом проекте не планировалось 2 риск тестировщик может не указать
что-то важное например не опишет как должна вести себя корзина если человек нажал отмена уже на шаге оплаты этот случай не будет обработан и может обнаружиться слишком поздно участие разработчика вы написали тест кейсов не избавляет от этих рисков на сто процентов но вероятно снижает ощутимо менеджер подготовки песке стив участвуют крайне редко как правило если возникают вопросы требующие его директивного решения итерационно и тестирование в спринте что это значит команды выполняют часть задачи окружает на тестовый сервер тестировщик проверяем задачей пишет бо глист разработчики сразу же исправляют найденные баги а затем приступают к следующим задач казалось бы зачем такие
сложности особенно если мы работаем по скрам и с принтами сделались примет протестировали такой подход в принципе возможен но количество багов в глистах после каждого спринта и время на их исправление начинают расти в геометрической прогрессии от количества спринтов и сложности проекта более мелкие итерации тестирования в итоге экономит от 20 до 50 процентов времени на тестирование и bug fix баллисты становится меньше с ними проще работать и они не вгоняют депрессии количество регрессии сокращается если есть какая то фундаментальная ошибка и и выловит максимально рано исправление будет стоить дешевле на этой диаграмме мы примерно показали как меняется стоимость каждого
бага в зависимости от момента когда он найден цифра на шкале условные скажем так если бак нашел программист это практически ничего не стоит тестировщик тоже немного стоимость блага допустим дольку шоколадки и сливок нашел клиент стоимость сразу увеличивается и становится равной шоколадок 20-25 но если какой-нибудь каушанский все сто шоколадок если не больше так что раннее выявление багов это реально экономии шоколада еще один плюс регулярное тестирование мелкими итерациями beer pong между разработчиками тестировщиком не успевает перерасти в полномасштабный турнир что это значит пинг-понг это процесс когда тестировщик пишет бак разработчик вопрос к нему тестировщик отвечает разработчик задает еще один
вопрос и так до бесконечности в идеале спустя несколько вопросов и ответов бак решается хотя времени на перебрасывание тратится очень много на этом слайде диаграмма более-менее нормального развития событий на этом как еще может быть если опираться на то что и разработчик и тестировщик адекватные люди между которыми нет кровной мести причины пинг-понга как правило нежелание поругаться и затянуть процесс причина в том что разработчика потерян контекст задачи когда тестировщик пишет бак по задача которую разработчик делал неделю-две месяц назад вспоминать контекст сложнее чем потомка что выполненным задачам и вопросов появляется больше мы с вами это смотрели на предыдущем слайде
про стоимость бага к тому же в процессе работы над задачами разработчики с менеджером могли согласовать какие-то детали о которых тестировщик не знает и чем меньше он в контексте задач тем дольше будет турнир по пинг-понгу итерационная проверка тестировщику не дает выпадать из процесса разработки разработчикам помогает быстрее понять багов а значит и быстрее их исправить если вы знакомы с храмом то заметили что схема на слайде очень похожа на схему спринта где небольшая петля это стендап итерационно и тестирование как и стандарту проводится регулярно как правило ежедневно в редких случаях один раз в два дня при планировании задач мы
придерживаемся правила что оценка одной задачи не должно быть больше четырех крайне редко 8 часов если больше диком позируем поэтому ситуации когда за полный рабочий день команды ничего нельзя протестировать редкость важный момент такой подход работает и применим к крупным проектам и командной разработки если у вас простой проект на одну неделю смысл в операционном тестирование нет достаточно сделать полный тест всем задачам после завершения разработки когда спринт завершился проводится итоговое тестирование это не значит что по задачам проверяются снова все тест кейсы скорее это как взгляд сверху посмотреть ключевой функционал спринта и всего проекта и убедиться что он работает
есть такое понятие смог тест или дымовое тестирование термин пошел от аппаратных проверок когда подключали новую плату смотрели не идет лиды и следы монет смог тест пройден так что по итогам спринта мы проверяем что от проекта дым не идет когда проверка закончена и задымления устранена мы либо переходим к следующему спринту все также начиная с планирование либо завершаем очередную версию проекта если этот спринт был последним дальше я расскажу о завершающих этапах тестирования перед публичным релизом проекта итак разработка очередной версии закончена тестирование вроде бы тоже кажется все можно отдавать проект пользователем но мы рекомендуем провести ещё одну проверку
передать проект на тестирование человеку который ничего о нем не это так называемое исследовательское тестирование или black box у себя мы делаем проверку другим менеджером проекта мы называем это тестирование внешним менеджером почему не тестировщиком менеджер проверяет немного по-другому более предвзято ему не важно что все сделано по макету и ошибки нет если менеджеры будет неудобно он напишет об этом в итоге вы получите список замечаний и вопросов которые мог бы задать заказчик или дотошный пользователь не обязательно все замечания нужно исправлять конечное решение остается за вами наконец вы все проверили и очередная версия готова к релизу пара запускаться если
это первая версия проекта вам потребуется не просто обновить код но и выполнить первый deployment перенос проекты на рабочий сервер следующих модулях мы отдельно и подробно расскажем о дипломе nti и дадим вам чек листы проверки хостинга и тепло и очередной версии проекта сейчас я кратко перечислю что именно мы делаем на этом этапе проводим общей смог тест проекта на продакшен сервере проверяем проект на google pagespeed к тому же некоторые ценность системы имеют внутренние механизмы проверки например в битриксе есть монитор качества на наших проектах мы проходим такие проверки обязательно несмотря на то что некоторые тесты скажем так странно
и общая проверка помогает исключить возможные внутренние ошибки и повысить качество проекта этот цикл тестирование выглядит громоздким поскольку он рассчитан именно на крупные проекты где много версий командная разработка и постоянно меняющиеся требования если у вас проекте один программист или проект всего на пару недель такой цикл тестирование будет избыточным поэтому упрощайте процесс под реальные задачи но если вы научитесь использовать цикл полностью то большие проекты будут вам не страшны в начале модуля я обещала затронуть тему автоматизированного тестирования деталям и погружаться не будем задача сделать из вас тестировщиков у нас нет но иметь общее представление о системах автоматизированных тестов
какие они бывают и что умеют был полезно и может пригодится вам в будущем что же такое автоматизированное тестирование это тестирование которое может проходить без участия человека в процессе проведения какого-либо теста из чего состоит автоматизированное тестирование первое это инструмент программное обеспечение с помощью которого специалист пишет тесты выполняет отладку контролирует выполнение и анализ результатов прогонов тест скриптов второй тест скрипт это набор инструкций для автоматической проверки определенной части функционала системы например для отправки сообщения из формы обратной связи 3 тестовый набор или testing эта комбинация ты скриптов для проверки набора связанных функций например набор может быть таким перейти на
страницу о компании затем страницу контакты пролистать слайдер объяснить данные форму обратной связи закрыть и открыть снова и отправить важный момент написание автоматизированных тестов близко к написанию программного кода не каждый тестировщик который хорошо справляется с ручным тестированием освоить написание скриптов один из инструментов для автоматизированного тестирования веб-разработке php unit это инструмент для модульного тестирования или как его ещё называют ли не тестирование идею использование состоит в том чтобы писать тесты для каждой нетривиальные функции или метода это позволяет достаточно быстро проверить не преминули очередное изменение кода к регрессии то есть появлению ошибок уже от тестированных функциях также и не
тестирование облегчает обнаружение и устранение таких ошибок однако чаще всего для интернет-проектов используйте линию или вот драйвер это инструмент для автоматического управления браузерами с его помощью можно имитировать действия пользователя на сайте например клики и ввод данных форму и таким образом автоматизировать ручную проверку selenium ольбия это плагин к firefox который позволяет записывать и воспроизводить действия пользователям браузере подойдет для небольшого сценария по воспроизведению бага или помощь ручному тестированию для рутинных операций selenium webdriver это набор библиотек ли различных языков программирования которые позволяют управлять браузером прямо из программы работа для любых браузеров и позволяет писать тесты со сложной логикой проведения
и проверок например хорошо подойдет для проведения интеграционных тестов и также как php uniq позволяет выделять регрессии уже проверенным коде казалось бы зачем вообще ручное тестирование можно написать авто тесты на все и гонять их при любом изменений но не так все просто рассмотрим плюсы и минусы автоматизированного тестирования плюс исключен человеческий фактор на самом деле нет автоматизированные тесты тоже могут быть кривыми потому что готовит и проводит их людям еще плюс и быстрое выполнение нет зависимости от времени специалиста отчета формируется автоматически минусы повторяемость исключен человеческий фактор поэтому повтор будут абсолютно идентичными то время как человек каждый раз будет
проверять немного по-другому далее затраты на разработку придётся потратить много времени на написание тестов это время может быть сопоставимым со временем разработки следующий минус затраты на поддержку при любых изменениях проекте потребуется вносить изменения в ted скрипты на этой стадии актуализация скриптов может стать более трудоемко и чем написание кода еще один минус пропуск многих ошибок и наконец стоимость инструмент автоматизации они не бесплатны и так что же делать нужны автотесты или нет ответ зависит от ситуации когда авто тесты будут полезны при длинных однообразных сценариях которые не меняются со временем для проверки точных математических расчетов для проверки труднодоступных мест
системе зачастую связанных с брендом например на интеграционных протоколах для миграции данных и на критической инфраструктуре где высока цена регрессии в ходе этого модуля мы говорили о тестировании проекта на разных стадиях обсудили зачем нам ручное тестирование и когда пригодится автоматизированное теперь немного общей терминологии о видах тестирования все виды условно можно разделить на 3 группы функциональное не функциональны и связанные с изменениями функциональные тесты рассматривают внешнее поведение системы например мы проводим функциональное тестирование когда проверяем выполнение задачи и всех его тест кейсов не функциональное тестирование это проверка того как система работает сюда входит например нагрузочное тестирование и заберите проверка
связанные с изменениями виды тестирования это как вы могли догадаться проверка системы после внесения изменений например после bug fixes к этой группе относятся смог теста информация очень обобщенная если вы заинтересовались можете подробнее прочитать на протестил точка ру там все достаточно подробно и понятно описано