Проектное управление. Тестирование и развитие продукта

1.

ОСНОВЫ
ПРОЕКТНОГО
УПРАВЛЕНИЯ
Тестирование и развитие продукта
(лекция 4)
Титов Сергей Анатольевич, к.э.н., MBA
[email protected]
Moscow, 2020

2. Виды пользовательского тестирования

Мысленный проход/ прогон
(cognitive walkthrough)
Коллективный проход/ прогон
(pluralistic walkthrough)
Эвристическое оценивание (на основе правил,
например, 3 клика, 7 кнопок, перевернутая
пирамида, …)
(heuristic evaluation)
Свободное использование
(unmoderated studies)
Пошаговый тест
Сплит-тест
(split test, A/B test)
Мысли вслух (thinking aloud) и анализ протоколов
Автоматизированное тестирование
Тестирование содержания и процесса обучения
Дымовой тест
(smoke test)
ВИГ/ Консьерж
(Wizard of Oz)
Претотипирование

3. Сценарий свободного тестирования

Формат SPICIER
В рамках исследования потребительского поведения велосипедистов мы
обнаружили следующую проблему. Студентка Анна, … лет,
проживающая …, часто проводит свободное время в коллективных
велосипедных прогулках по лесным и лесопарковым маршрутам. После
прогулки возникает задача мойки велосипеда. В среднем она тратит на
мойку около 50 минут, качество мойки ниже ожидаемого уровня.
Анна: после прогулок мою велосипед не каждый раз,
возникают проблемы с соседями и родителями, т.к.
ставлю велосипед в узком коридоре. Мойка возле подъезда
неудобная, долгая, сама вся «уработаешься», все равно
грязь в коридоре. Велосипед все равно грязноватый. Подруги
посмеиваются. Просто не знаю, что делать.
С помощью предлагаемого комплекта «ЧистоВел»
попробуйте решить проблему, аналогичную проблеме
Анны. Вы можете использовать комплект по Вашему
усмотрению, лишь бы проблема Анны была эффективно
решена.

4. Сценарий пошагового тестирования

Общая информация
Краткое описание Чистка велосипеда универсальной щеткой
Акторы
Пользователь
Контекст
После велопрогулки, перед домом
Предусловия
Велосипед грязный
Постусловия
Велосипед достаточно чистый, чтобы его переместить в лифте, при этом не испачкаться, не испачкать поверхности лифта,
стен; поставить в коридоре и избежать социального давления
Основной сценарий
Шаг
Действие
Ожидаемый результат
Фактический результат
1 Осмотр велосипеда на степень загрязнения
Адекватная оценка, позволяющая Щетки и скребки определены
правильно определить щетки и
неправильно
скребки
2 Распаковка и подготовка щетки
Щетка вытащена и футляра,
Щетина на ручке болтается
щетина насажена на ручку
3 Насадка соответствующих загрязнению скребков Скребки насажены на рукоять
Скребки насажены на рукоять
4 Снятие крупной грязи с рамы и колес скребками Крупная грязь счищается
…
крупными скребками
5 Прочистка протектора мелким скребком
…
…
……
…
…
Альтернативные сценарии
4а Снятие грязи с рамы и колес мелким скребком
или торцом щетки
…
Исключения
Выводы
1 Необходимо на скребках отметить иконками, для каких частей они предназначены
2 Необходимо отметить иконками, для чего щетки не предназначены
3 Протекторы имеют очень разный рисунок, надо рассмотреть варианты зубцов у скребков
4 При чистке протектора жесткой щеткой мелкая грязь сильно разлетается и пачкает пользователя.

5. Документирование

Тест 1
Продукт:
Версия продукта:
Формулировка проблемы:
Версия формулировки проблемы:
Персона
ФИО:
Демография
Возраст:
…:
Эмпатическая карта:
Социальная сеть:
Тестирование
Дата:
Время:
Тип теста:
Сценарий тестирования:
ЧистоВел
ЧВ1.3
ссылка на документ
ЧВ1.1
Ян Иван Иванович
19
…
ссылка на документ
ссылка на документ
01 апреля 2018
6:15
Мысленный путь
ссылка на документ
Тест 2
Тест 3
Тест 4

6. Результаты тестирования

Тест 1
Результаты
Количественные метрики
Время чистки:
Кол-во подъемов:
…:
Воспринимаемое качество:
…:
Неколичественные гипотезы
Мелкая грязь скрывается чехлом:
…:
Выводы
Три L
Достоинства (Likes):
Недостатки (Lacks):
Интересное (Lessons):
Решения:
ссылка на документ
10
0
8
ссылка на документ
да
скребок для протектора
удобный
рукоять выскальзывает при
сильных усилиях
скребок для протектора
можно использовать для
чистки педалей
сделать несколько
вариантов рукояти из
пластилина и
протестировать
изучить характер грязи,
налипающей на педали
Тест 2
Тест 3
Тест 4

7. Результаты тестирования

8.

Ценность, результаты, функции,
элементы
Ценность
(сокращение
разрыва между
Дано и Надо)
Функции
Результат
(проверяемые
артефакты и
изменения)
• Повысить
• Проделать
комфортабельность
отверстие в стене
жилища (например,
нужных размеров
путем размещения на
стене картины) с
минимальными
издержками
Элементы
• Устойчивое вращение
сверла при заданной
скорости
• Необходимое
давление и
разрушение
материала в
предсказуемых
объемах
• Хороший «прицел» к
выбранному месту
• Контроль перегрева
сверла
Клиентоориентированность –
мыслить в категориях
ценности для клиента

9.

Ценность (в какой степени решается
проблема – комфортабельность жилища)
Эмоциональноэстетический
план
Смысловой план
Дано
Надо
Долго (45-60 минут) и часто (каждый
раз после прогулки)
Быстро (10-15 минут), реже (хотя бы
через раз)
Утомительно (тратится много
физических и эмоциональных сил,
впечатления от прогулки портятся)
Легко (без воздействия на впечатления
от прогулки), без раздражения
Сложно (различные усилия для разных
частей велосипеда)
Попроще бы
Неудобно (много различных предметов,
они не очень-то и приспособлены для
веломойки)
Один удобный набор/ прибор, переносной,
прикрепляемый к велосипеду
Некрасиво (какие-то ведра, тряпки, сама
вся мокрая, грязная, остаются следы)
Набор/ прибор красивых форм,
расцветок, минимизация самозагрязнения
Грязь – источник возможных болезней,
проблем; она не красива
Чистота и красота – залог здоровья,
позитивного отношения к жизни
Забота о велосипеде как угнетающая
обязанность
Забота о велосипеде как проявление
любви к хорошей, полезной вещи, которая
приносит радость
Утомительная и некачественная мойка
как проявление неспособности
эффективно решать свои жизненные
проблемы
Быстрая и качественная мойка, красивый
и чистый велосипед как демонстрация
своих способностей
Ценность
(сокращение
разрыва между
Дано и Надо)
Как?
Противоречия между
отношениями,
восприятиями, стилями
Зачем?
Противоречия целями,
установками, смыслами
Ценность
ЗАЧЕМ?
Быстрота чистки
Легкость чистки
Простота чистки
Удобство
Красивый набор
Целевые
функции
Внутренние
функции
ЧТО?
КАК?
Служит в
течение года
Уничтожает 50
мышей в год
Держатель
высвобождаетс
я в 99%
Сила удара не
менее 20 кг
Проверяемые
требования
Сокращение
затрат на
медикаменты на
5 т.р. в год
Сокращение
затрат на
устранение на
20 т.р. в год
Сокращение
времени
простоя на 20
чел-часов в год
Повышение
комфортабельн
ости с 3 до 5
баллов
Сокращение
съеденного
зерна на 250 кг
в год
Сокращение
испорченного
зерна на 500 кг
в год
Входные
функции
Зафиксировать
сторожок в
держателе
Здоровье
людей, коров и
других
животных
Укусить и
дернуть
приманку
ДЛЯ ЧЕГО?
Устойчивость
работы
электросети и
слаботочки
Приманить
мышь
Зафиксировать
приманку на
сторожке
Отвести рамку
Ущерб для
пользователя 0
при следовании
инструкции
Технические
требования
Проверить
работоспособно
сть мышеловки
20 чел-часов в
год
разнорабочего
Приобрести
приманку
2 кг сыра
«Пармезан»
3 чел-часов в
год. разнораб.
1 чел-час в год
МТО, бух
Дернуть крючок
на держателе
Дернуть
держатель
Освободить
сторожок
Комфортабельн
ость помещений
Освободить
пружину
Сохранность
зерновых
Уничтожить
мышь
5 чел-часов в
год разнораб.
V
Услуги
утилизации
биоматериалов
200 руб.
Ударить по
мыши
Сжать пружину
Начать
движение рамки
3 чел-часов в год разнораб.
Поддерживающие функции
1 чел-час в год
разнораб.
Смазка 20 мл в
год

10.

Результаты (результирующие, полезные функции, что
приводит к решению проблемы – отверстие в стене)
Результат (способ
создания ценности)
• Сокращение времени
до …
• Сокращение усилий
(подъемов)
• Сокращение
принадлежностей
• …
Ценность
ЗАЧЕМ?
Целевые
функции
Внутренние
функции
ЧТО?
КАК?
Служит в
течение года
Уничтожает 50
мышей в год
Держатель
высвобождаетс
я в 99%
Сила удара не
менее 20 кг
Проверяемые
требования
Сокращение
затрат на
медикаменты на
5 т.р. в год
Сокращение
затрат на
устранение на
20 т.р. в год
Сокращение
времени
простоя на 20
чел-часов в год
Повышение
комфортабельн
ости с 3 до 5
баллов
Сокращение
съеденного
зерна на 250 кг
в год
Сокращение
испорченного
зерна на 500 кг
в год
Входные
функции
Зафиксировать
сторожок в
держателе
Здоровье
людей, коров и
других
животных
Укусить и
дернуть
приманку
ДЛЯ ЧЕГО?
Устойчивость
работы
электросети и
слаботочки
Приманить
мышь
Зафиксировать
приманку на
сторожке
Отвести рамку
Ущерб для
пользователя 0
при следовании
инструкции
Технические
требования
Проверить
работоспособно
сть мышеловки
20 чел-часов в
год
разнорабочего
Приобрести
приманку
2 кг сыра
«Пармезан»
3 чел-часов в
год. разнораб.
1 чел-час в год
МТО, бух
Дернуть крючок
на держателе
Дернуть
держатель
Освободить
сторожок
Комфортабельн
ость помещений
Освободить
пружину
Сохранность
зерновых
Уничтожить
мышь
5 чел-часов в
год разнораб.
V
Услуги
утилизации
биоматериалов
200 руб.
Ударить по
мыши
Сжать пружину
Начать
движение рамки
3 чел-часов в год разнораб.
Поддерживающие функции
1 чел-час в год
разнораб.
Смазка 20 мл в
год

11.

Функции (внутренние операции, соединяющие элементы
(ресурсы) для создания результата, как создается
результат – вращение сверла)
Ценность
ЗАЧЕМ?
Функции (способы
создания
результата)
Осмотр велосипеда
Сборка щетки
Удаление основной
грязи с рамы
Чистка протектора
шин
…
Протирка салфеткой
Надевание чехла
…
Целевые
функции
Внутренние
функции
ЧТО?
КАК?
Служит в
течение года
Уничтожает 50
мышей в год
Держатель
высвобождаетс
я в 99%
Сила удара не
менее 20 кг
Проверяемые
требования
Сокращение
затрат на
медикаменты на
5 т.р. в год
Сокращение
затрат на
устранение на
20 т.р. в год
Сокращение
времени
простоя на 20
чел-часов в год
Повышение
комфортабельн
ости с 3 до 5
баллов
Сокращение
съеденного
зерна на 250 кг
в год
Сокращение
испорченного
зерна на 500 кг
в год
Зафиксировать
сторожок в
держателе
Здоровье
людей, коров и
других
животных
Укусить и
дернуть
приманку
ДЛЯ ЧЕГО?
Устойчивость
работы
электросети и
слаботочки
Приманить
мышь
Зафиксировать
приманку на
сторожке
Отвести рамку
Входные
функции
Ущерб для
пользователя 0
при следовании
инструкции
Технические
требования
Проверить
работоспособно
сть мышеловки
20 чел-часов в
год
разнорабочего
Приобрести
приманку
2 кг сыра
«Пармезан»
3 чел-часов в
год. разнораб.
1 чел-час в год
МТО, бух
Дернуть крючок
на держателе
Дернуть
держатель
Освободить
сторожок
Комфортабельн
ость помещений
Освободить
пружину
Сохранность
зерновых
Уничтожить
мышь
5 чел-часов в
год разнораб.
V
Услуги
утилизации
биоматериалов
200 руб.
Ударить по
мыши
Сжать пружину
Начать
движение рамки
3 чел-часов в год разнораб.
Поддерживающие функции
1 чел-час в год
разнораб.
Смазка 20 мл в
год

12.

Элементы (ресурсы, необходимые для выполнения
функций, что реализует функции – сверло, патрон,
двигатель)
Функции (способы
создания
результата)
Рукоятка
Набор щеток
Набор скребков
Салфетки
Чехол
…
Как?
Для чего?
Когда?
Зафиксировать
сторожок в
держателе
Укусить и
дернуть
приманку
Глаголы функции
Приманить
мышь
Зафиксировать
приманку на
сторожке
Отвести рамку
Проверить
работоспособно
сть мышеловки
Приобрести
приманку
Дернуть крючок Существительные –
на держателе
элементы
конструкции,
материалы,
Дернуть
субъекты,
объекты
держатель
Освободить
сторожок
Ударить по
мыши
Начать
движение рамки
Освободить
пружину
Сжать пружину
Уничтожить
мышь
Целевые
функции
Внутренние
функции
Входные
функции

13. Структура продукта/ услуги

Инновации могут касаться разных слоев, но
всегда должны быть направлены на ценность