Метрики выполнения запросов на обслуживание
Измеряйте, сколько времени рутинные запросы занимают с точки зрения пользователя, какая часть этого времени уходит на ожидание, какие позиции каталога создают спрос и какая доля работы автоматизирована, а затем используйте эту картину, чтобы перепроектировать частые запросы, а не подгонять людей, которые их обрабатывают.
Обзор и мотивация
Запрос на обслуживание это рутинный запрос пользователя на то, что услуга предназначена предоставлять: учётную запись, доступ к папке, ноутбук, лицензию на программу, справочную информацию. Он отличается от инцидента, то есть незапланированного нарушения работы услуги (см. тему 3.2, Объём и приоритет инцидентов), и от изменения, которое меняет услугу и требует свежей оценки риска (см. тему 4.3, Метрики управления изменениями). В ITIL 4 эту работу охватывает практика управления запросами на обслуживание, а саму работу обычно описывают как повторяемую модель запроса: необходимая информация, согласования, шаги и ожидаемое время. В ITIL это слово пишется по-английски «fulfilment»; в русском тексте этой темы везде используется «выполнение».
Запросы важны для метрик, потому что это предсказуемый спрос. Инцидент всегда неожиданность, а запрос на ноутбук для нового сотрудника приходит каждый месяц и проходит одни и те же шаги. Эта предсказуемость делает запросы лучшими кандидатами для проектирования, стандартизации и автоматизации процессов. Она же означает, что задержки редко вызваны сложностью. Их причина в очередях, согласованиях и передачах, поэтому полезный вопрос звучит так: где запрос ждёт, а не как быстро кто-то печатает.
Единица анализа это позиция каталога: одна именованная вещь, которую пользователь может запросить в каталоге услуг (в ITIL это «service catalogue»; в остальной части темы используется «каталог услуг»). Показатели по каждой позиции намного полезнее одного усреднённого числа, потому что у запроса на сброс пароля и у запроса на создание сервера разные часы, разные владельцы и разные разумные целевые показатели. Усреднённое значение скрывает обоих.
Гибкий подход и ITIL встречаются здесь почти без трения. ITIL спрашивает, предоставляет ли услуга согласованный результат за согласованное время. Практика потока в гибкой разработке спрашивает, сколько времени работа движется от запроса до готовности, сколько её стоит в очередях и сколько работы находится в процессе одновременно. Запрос это рабочий элемент, движущийся по рабочему процессу, поэтому инструменты измерения потока, такие как время цикла и возраст рабочего элемента, применимы напрямую (см. тему 2.1, Показатели потока). Словарь отличается. Арифметика та же.
Постоянно встречаются три термина. Время выполнения запроса это время, прошедшее с момента, когда пользователь подал запрос, до момента, когда пользователь подтвердил или система зафиксировала, что запрошенное доставлено. Время активной работы это время, в течение которого кто-то действительно работает над запросом, а время ожидания это всё остальное, включая согласования и ожидание ответа пользователя. Разницу между ними и должна уменьшать модель запроса. Доля автоматизации это часть запросов, выполненных без участия человека после подачи.
Измерениям времени нужна осторожность. Времена выполнения асимметричны: большинство запросов завершается быстро, а некоторые длятся очень долго. Среднее значение смещается из-за этих немногих, поэтому сообщайте медиану и высокий процентиль, например 85-й или 95-й (см. тему 1.6, Статистическая грамотность для метрик услуг). Целевые показатели, согласованные с клиентами, например в соглашении об уровне услуг (SLA), следует формулировать так же: «85 процентов запросов на ноутбук выполняются в течение 5 рабочих дней» говорит больше, чем «в среднем 3 дня».
Наконец, предупреждение из психологии измерений. Когда команду оценивают по быстрому закрытию запросов, самый дешёвый способ улучшить число состоит в том, чтобы изменить, что считается закрытым, или поставить часы на паузу. Закон Гудхарта действует в полной мере (см. тему 1.2, Закон Гудхарта и психология метрик). Поэтому каждая метрика ниже снабжена ограждением, и ни одна из них не описывает отдельного сотрудника.
Ключевые принципы
- Измеряйте по каждой позиции каталога. У каждой позиции своя модель запроса, свой владелец и свой разумный целевой показатель, поэтому усреднённые числа вводят в заблуждение.
- Запускайте часы, когда пользователь просит, и останавливайте, когда он получил то, что просил. Внутренние этапы полезны для диагностики, но не отражают опыт клиента.
- Разделяйте время ожидания и время активной работы. Разрыв между ними показывает, где окупается перепроектирование, и это редко сама работа.
- Сообщайте распределения, а не средние. Медиана и 95-й процентиль описывают то, что переживают пользователи.
- Рассматривайте спрос как сигнал. Объём по позициям показывает, что нужно пользователям, что их сбивает с толку и что заслуживает автоматизации или самообслуживания.
- Сначала автоматизируйте стабильное и частое. Доля автоматизации это результат хорошего проектирования запроса, а не цель сама по себе.
- Измеряйте команду и услугу, а не человека. Запросы проходят через системы, а различия между сотрудниками в основном отражают состав работы.
Определения метрик
| Метрика | Определение | Формула | Единица | Источник данных | Практика ITIL | Гибкий аналог | Периодичность |
|---|---|---|---|---|---|---|---|
| Время выполнения запроса | Время, прошедшее до доставки запроса, показанное как медиана и 95-й процентиль по каждой позиции каталога | часы запускаются, когда пользователь подаёт запрос, и останавливаются, когда пользователь подтверждает доставку или доставка зафиксирована; запросы, отменённые пользователем, исключаются; время ожидания пользователя сообщается отдельно, а не вычитается | рабочие дни или часы | история запросов в ITSM-средстве | Управление запросами на обслуживание | Время цикла на доске команды (см. тему 2.2, Время выполнения, время цикла и эффективность потока) | Еженедельно, тренд ежемесячно |
| Выполнение в пределах целевого показателя | Доля запросов, доставленных в пределах целевого показателя, согласованного для их позиции каталога | запросы, выполненные в пределах целевого показателя / запросы, выполненные за период; часы как выше, ещё открытые элементы исключаются и учитываются в возрасте бэклога | процент | история запросов в ITSM-средстве; таблица целевых показателей по позициям каталога | Управление уровнем услуг | Ожидание уровня услуги (SLE) | Ежемесячно |
| Бэклог запросов и его возраст | Число открытых запросов и возраст самых старых, по позициям каталога | открытые запросы на конец периода (число); возраст каждого открытого запроса = дата отчёта минус дата подачи; сообщайте число, медианный возраст и возраст самого старого | число и дни | открытая очередь запросов в ITSM-средстве | Управление запросами на обслуживание | Работа в процессе и возраст рабочих элементов (см. тему 2.3, Работа в процессе и теория очередей) | Еженедельно |
| Время ожидания согласования | Время, которое запрос ждёт согласования | часы запускаются, когда согласование запрошено, и останавливаются, когда оно получено или отклонено; запросы без этапа согласования исключаются | часы | журнал согласований в ITSM-средстве | Управление запросами на обслуживание; обеспечение изменений | Время в блокировке или столбец «ожидание» на доске | Ежемесячно |
| Объём запросов по позициям каталога | Число запросов, поданных по каждой позиции, и её доля среди всех запросов | запросы, поданные по каждой позиции за период; повторно поданные дубликаты, если они выявлены, исключаются; сообщайте число и долю от общего | число и процент | записи запросов в ITSM-средстве | Управление каталогом услуг | Анализ спроса для формирования бэклога | Ежемесячно |
| Доля автоматизации | Часть запросов, выполненных без ручного шага после подачи | запросы, выполненные автоматизацией от начала до конца / запросы, выполненные за период; запрос, к которому человек прикасался на любом шаге выполнения, считается ручным; согласования человеком не считаются ручными шагами выполнения, если их требует политика | процент | записи выполнения в ITSM-средстве и журналы платформы автоматизации | Управление запросами на обслуживание; автоматизация в цепочке создания ценности услуг | Автоматизация в определении готовности | Ежемесячно |
| Доля повторного открытия запросов | Доля выполненных запросов, которые пользователь открывает заново или подаёт повторно, потому что результат был неверным или неполным | запросы, открытые заново или поданные повторно по той же позиции тем же пользователем в течение 7 дней после выполнения / запросы, выполненные за период; 7-дневное окно это пример, который команда записывает | процент | история запросов в ITSM-средстве | Управление запросами на обслуживание | Доля переделок; ускользнувшие дефекты | Ежемесячно |
Время выполнения учитывает только рабочее время, если команда согласовала и записала календарь; иначе используйте календарные часы и скажите об этом. Метрика бэклога содержит три числа намеренно, потому что одно число ничего не говорит об ожидании. Определение доли автоматизации не включает согласования человеком в «ручные» шаги, потому что многие согласования это решение политики, а не затраты на выполнение; время ожидания согласования измеряется отдельно, чтобы задержка оставалась видимой.
Рекомендации
Определите часы и единицу измерения
1. Измеряйте по каждой позиции каталога и опубликуйте список позиций. Начните с десяти позиций с наибольшим объёмом, которые обычно покрывают большую долю запросов, и добавляйте позиции по мере появления данных. Дайте каждой позиции владельца, заявленный целевой показатель и однострочное определение слова «доставлено». Список позиций служит знаменателем для всего остального, поэтому храните его в реестре метрик (см. тему 1.4, Управление метриками и ответственность за них).
2. Запишите начало и конец часов для каждой позиции. Для большинства позиций часы запускаются при подаче и останавливаются, когда пользователь может пользоваться тем, что просил, а не когда заявка закрыта. Ноутбук доставлен, когда он в руках пользователя, а не когда заказан курьер.
3. Решите один раз, как учитывается ожидание пользователя. Некоторые запросы стоят, потому что пользователь не ответил на вопрос. Ставить часы на паузу для этого разумно, но это и самый простой рычаг для злоупотреблений. Записывайте паузу как отдельное состояние с причиной, сообщайте время паузы отдельным числом и проверяйте долю пауз по позициям (см. тему 1.5, Источники данных и инструментирование).
Сообщайте то, что переживают пользователи
4. Показывайте медиану и 95-й процентиль вместе с числом запросов. Разместите оба на одном графике по каждой позиции, указав число запросов за каждой точкой. Медиана в два дня при 95-м процентиле в двадцать говорит, что большинство пользователей обслужено хорошо, а хвост требует изучения, чего не покажет среднее в четыре дня. Когда запросов мало, скажите об этом и показывайте отдельные запросы вместо процентиля.
5. Сделайте возраст открытых запросов видимым. Время выполнения известно только после завершения запроса, поэтому оно запаздывает. Список самых старых открытых запросов по каждой позиции, отсортированный по возрасту, подсказывает команде, куда смотреть сегодня. В терминах потока это возраст рабочего элемента относительно обычного времени цикла позиции, и это самое практичное представление, которое может быть у очереди запросов.
6. Разделите прошедшее время на время активной работы, согласования и ожидания пользователя. Возьмите выборку выполненных запросов по одной позиции и разбейте каждый по времени, проведённому в каждом состоянии. Большинство команд обнаруживает, что активная работа составляет малую долю прошедшего времени. Этот вывод переводит разговор об улучшении от «работайте быстрее» к «уберите очередь между шагами», что составляет основную идею изучения очередей и потока (см. тему 2.3, Работа в процессе и теория очередей).
Используйте спрос, чтобы формировать услугу
7. Читайте объём по позициям как сообщение от пользователей. Растущий объём по одной позиции может означать растущую потребность, запутанный продукт или сбой в другом месте, например сломанный процесс, из-за которого люди приходят спрашивать снова. Позицию с очень малым объёмом можно рассмотреть как кандидата на вывод из каталога. Сравнивайте объём с данными о внедрении (см. тему 6.3, Метрики внедрения услуг и каталога).
8. Ранжируйте кандидатов на автоматизацию по объёму, стабильности и времени активной работы. Лучшие первые кандидаты это позиции с высоким объёмом, почти не меняющиеся и с заметным временем активной работы. Начните с позиции, шаги которой каждый раз одинаковы, например доступ к стандартной группе, и автоматизируйте шаги раньше, чем браться за исключения. Отслеживайте долю автоматизации по каждой позиции, чтобы прогресс был виден, а вопросы самообслуживания и отвода обращений направляйте в отдельную тему (см. тему 3.7, Метрики самообслуживания и автоматизации).
9. Перепроектируйте согласования раньше, чем добавлять людей. Ожидание согласования часто доминирует во времени. Для каждого согласования спрашивайте, требует ли его политика, достаточно ли заранее согласованного стандартного запроса и может ли согласующим быть роль с заместителем, а не один человек. Предварительное согласование малорисковых, хорошо изученных запросов повторяет идею стандартных изменений в обеспечении изменений и убирает очереди, не убирая контроль.
Сохраняйте честность чисел
10. Всегда сочетайте скорость с качеством. Сообщайте время выполнения рядом с долей повторного открытия и сигналом удовлетворённости пользователей по той же позиции (см. тему 6.1, Метрики удовлетворённости клиентов). Более быстрый запрос, который возвращается открытым заново, медленнее, чем кажется. Если скорость улучшилась, а доля повторного открытия выросла вместе с ней, считайте выигрыш в скорости недоказанным.
11. Держите запросы, инциденты и изменения раздельно в данных. Смешивание искажает все три. Сброс пароля, который на самом деле симптом неисправной службы входа, это инцидент, а запрос изменить работу услуги это изменение. Классифицируйте при приёме по короткому правилу, ежеквартально проверяйте выборку на ошибочную классификацию и сравнивайте объёмы запросов и инцидентов рядом (см. тему 3.1, Метрики службы поддержки).
12. Разбирайте таблицу позиций вместе с командой, которая выполняет работу. Встречайтесь ежемесячно на тридцать минут вокруг таблицы по позициям: объём, медиана и 95-й процентиль, самый старый открытый запрос, доля автоматизации, доля повторного открытия. Выберите одну позицию и одно изменение для проверки, а в следующем месяце посмотрите на ту же таблицу, чтобы увидеть, что произошло.
Способы подгонки и ограждения
| Метрика | Как её подгоняют | Парное ограждение (метрика или практика) |
|---|---|---|
| Время выполнения запроса | Постановка часов на паузу из-за «ожидания пользователя» независимо от того, виноват ли пользователь; закрытие запросов до доставки и повторное открытие их как новых; разбиение одного запроса на несколько мелких | Доля времени паузы по позициям с выборочным аудитом причин пауз; доля повторного открытия; подтверждение доставки пользователем до закрытия |
| Выполнение в пределах целевого показателя | Переопределение целевого показателя на более лёгкий; учёт только завершившихся запросов с игнорированием старых открытых; выбор быстрых позиций для набора целевых показателей | Возраст бэклога для открытых запросов; изменения целевых показателей записываются в реестр метрик с причиной; набор целевых показателей охватывает все позиции по объёму |
| Бэклог запросов и его возраст | Закрытие старых запросов как «нет ответа» или «устаревшие»; перемещение запросов в другую очередь или категорию, чтобы они выпали из учитываемой очереди | Число запросов, закрытых без доставки, по причинам; переносы по категориям и очередям разбираются на ежемесячной встрече |
| Время ожидания согласования | Согласующие одобряют не читая, чтобы сократить своё время; заявители торопят согласующих вне системы, и записанное ожидание получается коротким | Выборочная проверка одобренных запросов на соответствие политике; доля повторного открытия и исключения безопасности по одобренным позициям; число этапов согласования по позиции |
| Объём запросов по позициям каталога | Снижение объёма через затруднение поиска в каталоге или отговаривание от запросов; переклассификация запросов в инциденты или «общие вопросы» | Удовлетворённость каталогом; доля обращений, классифицированных как «прочее»; данные о внедрении услуги (см. тему 6.3, Метрики внедрения услуг и каталога) |
| Доля автоматизации | Автоматизация тривиальных позиций ради повышения процента; учёт как автоматизированного скриптового запроса, который человек всё равно проверяет вручную; сокрытие ручных шагов в отдельной заявке | Доля, взвешенная по объёму запросов и по снятому времени активной работы; доля сбоев автоматизации и возврата к ручной работе; выборка «автоматизированных» запросов, прослеженных от начала до конца |
| Доля повторного открытия запросов | Отговаривание от повторного открытия через его затруднение; указание пользователям открывать новый запрос, что обнуляет счётчик | Повторные запросы от того же пользователя по той же позиции в пределах окна; удовлетворённость пользователей по позиции; повторное открытие разрешено прямо из уведомления |
Здоровая картина выглядит так. Медиана и 95-й процентиль снижаются вместе, либо 95-й процентиль снижается, а медиана держится. Самый старый открытый запрос не намного старше 95-го процентиля выполненных. Доля повторного открытия и удовлетворённость остаются на месте или улучшаются, пока улучшается скорость. Доля автоматизации растёт по позициям, важным по объёму, а сам объём меняется по причинам, которые команда может объяснить. Если одно число резко улучшается, а его ограждение движется в обратную сторону, идите и смотрите на запросы, лежащие в основе.
Компромиссы: плюсы и минусы
| Подход | Сильная сторона | Слабая сторона |
|---|---|---|
| Измерение по позициям | Целевые показатели соответствуют работе; видно, где окупается перепроектирование | Больше данных для сопровождения; у малых позиций мало точек данных |
| Медиана и 95-й процентиль вместо среднего | Описывает то, что переживают пользователи; устойчива к выбросам | Труднее объяснить руководителям, привыкшим к одному числу; нестабильна для позиций с малым объёмом |
| Пауза часов при ожидании пользователя | Справедлива к команде, когда задержку вызвал пользователь | Легко используется во зло; скрывает влияние неясных форм и плохой коммуникации |
| Учёт доли автоматизации | Делает прогресс автоматизации видимым и связывает его со стоимостью | Поощряет лёгкую автоматизацию; ничего не говорит о качестве без пары в виде доли сбоев |
| Измерение от подачи пользователем до подтверждения пользователем | Соответствует опыту клиента | Зависит от подтверждения пользователя, которого часто нет; нужно правило по умолчанию |
| Строгое отделение запросов от инцидентов | Более чистые данные и лучшие целевые показатели | Требует дисциплины при приёме и споров о пограничных случаях |
Главный компромисс лежит между чистым числом и справедливым. Строгие часы, которые никогда не останавливаются, просты и трудно поддаются подгонке, но наказывают команду, когда пользователь медлит. Гибкие часы справедливее, но требуют аудита. Большинству команд лучше начать со строгих часов, добавить одно явное состояние паузы с причиной и открыто сообщать долю паузы.
Вопросы для обсуждения с командой
1. Какие три позиции каталога вызывают у наших пользователей больше всего ожидания, и откуда мы это знаем? Принесите таблицу по позициям с объёмом, медианой и 95-м процентилем времени выполнения. Попросите группу выбрать позиции по суммарному ожиданию (объём, умноженный на типичное ожидание), а не по тому, насколько они раздражают. Сравните ответ с первым инстинктом людей. Ведущему стоит отметить, где данные и инстинкт расходятся.
2. Когда у нас запускаются и останавливаются часы, и согласился бы с этим пользователь? Выберите одну частую позицию и пройдите её путь глазами пользователя, от первого щелчка до момента, когда он может пользоваться результатом. Отметьте, где статус нашей заявки говорит «готово» и где пользователь сказал бы «готово». Любой разрыв между ними это невидимое ожидание. Договоритесь об одном изменении события остановки и запишите его в реестр метрик.
3. Какая часть нашего прошедшего времени это работа людей, а какая ожидание? Возьмите выборку из десяти выполненных запросов по одной позиции и разбейте каждый на время активной работы, согласования и ожидания пользователя. Покажите результат в виде столбиковой диаграммы с накоплением. Спросите, что должно быть верно, чтобы ожидание сократилось вдвое. Этот вопрос обычно переводит обсуждение от «нам нужно больше людей» к «нам нужно меньше передач».
4. Какие согласования можно заменить заранее согласованным правилом? Перечислите согласования для главных позиций и политическую причину каждого. Там, где никто не помнит последнего отказа, согласование может быть ритуалом.
5. Если мы автоматизируем следующую позицию каталога, вырастет ли число по правильной причине? Обсудите, как доля автоматизации может расти за счёт лёгких или малообъёмных позиций, пока пользователи не видят разницы. Спросите, что команда будет измерять, чтобы убедиться, что автоматизация помогла: снятое время активной работы, долю сбоев, долю повторного открытия и удовлетворённость. Выбирайте следующую позицию для автоматизации по объёму и времени активной работы, а не только по лёгкости.
6. Что мы сделаем, если число на этой странице ухудшится, и кого обвинят? Проведите мысленный эксперимент открыто. Спросите, что команда будет склонна изменить в данных, прежде чем менять услугу. Договоритесь, что первая реакция на ухудшающееся число это посмотреть на запросы, которые за ним стоят.
Четыре точки зрения
Продуктовые команды и команды поставки
Продуктовые команды создают запросы по собственным услугам: доступ к средам, новые конвейеры, тестовые данные, ключи лицензий. Долгое выполнение таких запросов проявляется как простаивающая работа в потоке самой команды, поэтому показатель принадлежит их доске как состояние блокировки. Команды, которые владеют услугой, должны публиковать собственные позиции запросов и целевые показатели и считать повторяющиеся запросы кандидатами для бэклога (см. тему 2.6, Метрики бэклога и его уточнения). Когда запрос на самом деле означает недостающую возможность платформы, повторяющийся спрос это довод в пользу её создания.
Команды услуг и эксплуатации
Для людей, выполняющих запросы, таблица по позициям это карта того, куда уходят усилия. Они знают, какие шаги ручные, какие согласования застревают и какие формы дают расплывчатый ввод. Им следует владеть моделями запросов, бэклогом автоматизации и ежемесячным разбором, и они должны быть первой аудиторией данных. Числа описывают очередь и процесс, поэтому ясно скажите, что никого не ранжируют и что различия между людьми в основном отражают состав запросов, которые те берут.
Руководство и управление
Руководителям нужен краткий обзор: медиана и 95-й процентиль по главным позициям, доля запросов, выполненных в пределах целевого показателя, самые старые открытые запросы и тренд доли автоматизации и стоимости одного запроса (см. тему 7.5, Стоимость услуг и удельная экономика). Задача управления в том, чтобы спрашивать, что изменилось, а не кто медлит. Руководители также утверждают политику согласований, поэтому в их руках рычаг, который больше всего сокращает ожидание.
Клиенты и пользователи
Пользователям важны три вещи: как долго, насколько предсказуемо и сколько усилий. Внутренние состояния их редко интересуют. Покажите им понятный целевой показатель по каждой позиции («ноутбуки за пять рабочих дней»), сообщайте, где их запрос, и просите подтвердить доставку. Собирайте однопунктный сигнал удовлетворённости при закрытии и читайте комментарии.
На практике: пример гибкого ITIL
ИТ-подразделение регионального университета (вымышленная организация) управляет службой поддержки и небольшой командой платформы. Числа ниже иллюстративные, они не взяты ни из какой реальной организации.
На ежемесячном разборе команда смотрит на таблицу по позициям. По всем запросам среднее время выполнения составляет 3,1 рабочего дня, что выглядит приемлемо и почти не менялось год. По позициям картина другая. У «Доступа к общему диску» медиана 0,4 дня и 95-й процентиль 2 дня. У «Лицензии на программу для отдела» медиана 2 дня и 95-й процентиль 11 дней. У «Ноутбука для нового сотрудника» медиана 6 дней и 95-й процентиль 15 дней. Три главные позиции по объёму это доступ к общему диску, запросы лицензий и ноутбуки для новых сотрудников, с иллюстративными долями 32, 21 и 9 процентов от всех запросов.
Команда берёт выборку из десяти запросов на ноутбуки и разбивает время. Иллюстративный результат: около 0,5 дня активной работы, 2,5 дня ожидания согласования линейным руководителем, 1,5 дня ожидания подтверждения наличия на складе, а остальное в очереди курьера. Ожидание согласования составляет самую большую часть.
Решение следует из данных. Команда предлагает вместе с владельцем финансов и владельцем безопасности предварительно согласовывать ноутбуки из стандартного каталога, когда отдел кадров подтверждает роль нового сотрудника, а руководителя уведомлять, а не спрашивать. Они также подключают проверку склада к системе инвентаризации. Эксперимент задаётся на один квартал, и команда договаривается, что будет считаться успехом: 95-й процентиль для ноутбуков снижается, а доля повторного открытия и оценка удовлетворённости остаются на прежнем уровне.
Риск подгонки возникает на второй месяц. Медиана для лицензий резко падает, с 2 дней до менее 1. При разборе замечают, что доля времени паузы «ожидание пользователя» по этой позиции подскочила с иллюстративных 5 процентов до 40, а доля повторного открытия выросла. Выборка показывает, что сотрудники ставили запросы на паузу с шаблонным сообщением, как только лицензии требовалась любая проверка, и это останавливало часы. Команда не винит сотрудников. Она видит, что целевой показатель сделал паузу привлекательной, а поле причины паузы было свободным текстом. Команда заменяет причину паузы коротким списком, требует задавать пользователю конкретный вопрос и добавляет долю времени паузы постоянным столбцом рядом с медианой. Медиана для лицензий возвращается к прежнему уровню, доля повторного открытия падает, а освободившееся на обсуждения время команда тратит на перепроектирование формы лицензии, которая и порождала неясные запросы.
По итогам квартала (иллюстративно) 95-й процентиль для ноутбуков падает с 15 до 9 дней, а доля автоматизации для доступа к общему диску достигает 70 процентов. Команда записывает оба изменения и выбирает форму лицензии следующим экспериментом.
Отраслевой взгляд
Стартап. У стартапа мало типов запросов и нет формального каталога, а запросы и продукт делают одни и те же люди. Измеряйте три-четыре запроса, которые блокируют новых сотрудников, такие как учётные записи и оборудование, и следите за самым старым открытым запросом. Автоматизируйте приём на работу рано, потому что каждый наём повторяет его.
Малый бизнес. Малый бизнес часто опирается на одного ИТ-специалиста или внешнего поставщика. Используйте простую общую доску со столбцом для каждого состояния и отслеживайте возраст и объём запросов по типам. Просите у поставщика ежемесячный объём по позициям и самый старый открытый запрос.
Предприятие. У предприятия сотни позиций каталога, много групп выполнения и многоуровневые согласования. Сосредоточьтесь на главных позициях по объёму и на позициях с самым долгим суммарным ожиданием. Стандартизуйте определение часов во всех группах выполнения, прежде чем сравнивать их, и сообщайте о передачах между группами отдельно (см. тему 9.3, Метрики сотрудничества и передачи работы). Времена выполнения поставщиками относятся к тому же обзору и измеряются от запроса клиента, а не от получения поставщиком.
Государственный сектор. Государственные органы добавляют обязательные согласования, правила закупок и обязанности по ведению записей, поэтому часть времени ожидания определена политикой, и её следует помечать как таковую, а не считать задержкой, которую нужно устранить. Публикуйте целевые показатели по позициям простым языком там, где обязательства по услугам публичны. Сообщайте так, чтобы регулятор или надзорный орган мог воспроизвести результат, с записанными определениями.
Бизнес-обоснование: мотивация, ROI и TCO
Запросы составляют большую и повторяющуюся долю работы, которая доходит до службы поддержки, поэтому даже скромное перепроектирование даёт широкий эффект. Основные мотивы: более короткое и предсказуемое ожидание для пользователей, меньше усилий на обработку запроса, меньше повторных обращений и освобождённая мощность для работы над проблемами и улучшениями.
Затраты в основном разовые и скромные. Определение позиций каталога, согласование часов и проверка, что средство записывает нужные состояния, занимают несколько дней работы на группу плюс небольшие постоянные усилия, чтобы конвейер оставался корректным (см. тему 1.5, Источники данных и инструментирование). У автоматизации есть собственные затраты на создание и сопровождение, включая мониторинг автоматизаций, обработку сбоев и обновление при изменении целевых систем. Учитывайте это в совокупной стоимости владения сверх лицензии или времени разработки.
Отдачу следует оценивать по собственным данным, а не по общему эталону. Для одной позиции умножьте ежемесячный объём на сэкономленное время активной работы и на полную стоимость этого времени, затем вычтите затраты на создание и эксплуатацию изменения. Добавьте ценность устранённого ожидания для пользователей методом, который вы можете защитить, и показывайте её отдельно, потому что это оценка другого рода. Ни одно число в этой теме не является эталоном, а числа в примерах иллюстративные. Связывайте бизнес-обоснование со стоимостью одного запроса там, где есть финансовые данные (см. тему 7.7, Возврат инвестиций и бизнес-обоснование).
Антипаттерны и ловушки
- Одно усреднённое значение для всех запросов. Оно скрывает и быстрые победы, и длинный хвост. Сообщайте по позициям, с медианой и 95-м процентилем.
- Закрыть заявку и назвать это доставкой. У пользователя всё ещё может ничего не быть. Определяйте доставку со стороны пользователя и просите подтверждение.
- Свободные состояния паузы. Статус «ожидание» без причины позволяет остановить часы по любому поводу. Используйте короткий список причин и сообщайте долю паузы.
- Подсчёт автоматизации по числу позиций. Десять автоматизированных редких позиций могут поднять процент, никому не помогая. Взвешивайте по объёму и времени активной работы.
- Ранжирование сотрудников по числу закрытых запросов. Это поощряет выбор лёгких заявок и наказывает тех, кто берёт трудные. Сообщайте только на уровне команды и позиции.
- Сокрытие спроса ради видимой эффективности. Затруднение пользования каталогом снижает объём и усиливает раздражение. Сочетайте объём с данными об удовлетворённости и внедрении.
- Согласования как неприкосновенность. Согласования часто составляют самую большую задержку и редко пересматриваются. Спрашивайте, что защищает каждое и может ли правило справиться с этим.
- Смешивание запросов с инцидентами. Это искажает оба набора чисел. Классифицируйте при приёме и проверяйте классификацию выборкой.
Модель зрелости
| Измерение | 1 Начальный | 2 Развивающийся | 3 Стандартизованный | 4 Управляемый | 5 Согласованный |
|---|---|---|---|---|---|
| Определения и часы | Запросы считаются как заявки; конец часов это то, что значит «закрыто» | Некоторые команды определяют начало и конец по позициям; определения различаются | Одно письменное определение часов на позицию каталога, общее для команд | Определения пересматриваются по графику, изменения записываются с причинами | Определения следуют взгляду клиента через поставщиков и пересматриваются, когда перестают информировать решения |
| Данные и отчётность | Числа вытягиваются из средства вручную | Отчёты по некоторым позициям из ITSM-средства; средние времена | Медиана и 95-й процентиль по позициям из одного источника данных | Тренды, возраст бэклога и доля времени паузы разбираются вместе с их ограждениями | Данные о выполнении внутренними командами и поставщиками объединены и связаны с результатами для пользователей |
| Спрос и автоматизация | Запросы обрабатываются по одному; нет представления о повторяющемся спросе | Главные позиции определены неформально; несколько скриптов | Модели запросов документированы для главных позиций; бэклог автоматизации ранжирован по объёму и времени активной работы | Доля автоматизации и доля сбоев отслеживаются; согласования перепроектированы на основе данных | Спрос, самообслуживание и автоматизация планируются вместе по всей организации и постоянно адаптируются |
| Использование для улучшения | Числа сообщаются наверх, но не используются | Случайные исправления после жалоб | Ежемесячный разбор командой, которая выполняет работу | Финансируемые улучшения привязаны к результатам по позициям | Идеи улучшений приходят от команд, пользователей и поставщиков, а результаты возвращаются в проектирование каталога |
Контрольный список
- У каждой позиции каталога в области охвата есть владелец, однострочное определение слова «доставлено» и заявленный целевой показатель.
- События начала и конца часов выполнения записаны для каждой позиции.
- Ожидание пользователя это отдельное состояние с коротким списком причин, и время паузы сообщается.
- Отчёты показывают медиану и 95-й процентиль по каждой позиции с числом запросов за каждым значением.
- Самые старые открытые запросы видны команде каждую неделю.
- Время активной работы, согласования и ожидания проверено выборкой для главных позиций.
- Объём по позициям разбирается ежемесячно и сравнивается с данными о внедрении или удовлетворённости.
- Доля автоматизации взвешена по объёму и сочетается с долей сбоев и возврата к ручной работе.
- Каждая метрика скорости сочетается с долей повторного открытия и сигналом удовлетворённости пользователей.
- Запросы, инциденты и изменения классифицируются при приёме, и классификация проверяется выборкой.
- Ни один отчёт не ранжирует отдельных сотрудников.
Промпты для ИИ
Подготовьте модель запроса и определение часов для одной позиции каталога.
Я определяю измерение для этой позиции каталога: [название позиции каталога].
Сейчас шаги такие: [перечислите шаги и кто выполняет каждый], согласования
такие: [перечислите согласования], а наше средство называется [ITSM-средство].
Подготовь модель запроса с необходимой информацией, событиями начала и конца
часов выполнения, состояниями, в которых часы можно ставить на паузу, и
допустимыми причинами, а также список отметок времени, которые средство должно
записывать. Не придумывай эталонные значения или возможности средства.
Перечисли свои допущения и вопросы, на которые мне нужно ответить, чтобы
завершить определение.
Разбейте прошедшее время на время активной работы и ожидания.
Вот выборка из [число] выполненных запросов по позиции [позиция каталога] со
временем смены состояний: [вставьте обезличенную историю состояний, без имён].
Для каждого запроса и для выборки вычисли время активной работы, ожидание
согласования и время ожидания пользователя и покажи медиану и диапазон.
Укажи, какое состояние занимает больше всего времени и какие вопросы мне
стоит задать команде. Не делай выводов о причинах без доказательств и не
сравнивай отдельных людей. Перечисли свои допущения.
Ранжируйте кандидатов на автоматизацию.
Вот таблица позиций каталога с ежемесячным объёмом, медианным временем
активной работы, вариативностью шагов и затрагиваемыми системами: [вставьте
таблицу]. Предложи способ ранжировать кандидатов на автоматизацию по объёму,
стабильности и времени активной работы и объясни ранжирование для первых
[число] позиций. Отметь позиции, где автоматизация может создать риск для
безопасности или качества, и перечисли, что мне стоит сначала проверить у
[роль владельца контроля]. Не придумывай цифры экономии или эталонные
значения. Перечисли свои допущения.
Проверьте панель выполнения на риск подгонки.
Это наша панель выполнения запросов: [опишите метрики, определения и целевые
показатели]. Для каждой метрики перечисли, как её можно подогнать или
неверно прочитать, наблюдаемый признак в данных и парную метрику или практику
в качестве ограждения. Проверь, что ничто не ранжирует отдельных людей, и
предложи изменения формулировок, которые снижают давление на команду. Не
придумывай пороговые значения; спроси меня о тех, что тебе нужны. Перечисли
свои допущения.
Навыки ИИ
- Agile ITIL Metrics skill: используйте, чтобы найти определение, способ подгонки и ограждение для метрики запросов, а также соседние темы, которые к ней относятся.
- Agile ITIL Metrics maintainer skill: используйте, чтобы проверить, что правки этой темы сохраняют шаблон, часы и пары ограждений.
Ключевые выводы
- Измеряйте выполнение по каждой позиции каталога, от подачи пользователем до подтверждения пользователем, и сообщайте медиану и высокий процентиль.
- Большая часть прошедшего времени это ожидание, поэтому разделите время активной работы, согласования и ожидания пользователя, прежде чем решать, что исправлять.
- Читайте объём по позициям как сообщение от пользователей и автоматизируйте частые и стабильные позиции первыми.
- Сочетайте каждое число скорости с долей повторного открытия и сигналом удовлетворённости и открыто сообщайте время паузы.
- Описывайте очередь и процесс, никогда не человека.
Источники и дополнительное чтение
- AXELOS, ITIL Foundation: ITIL 4 Edition, TSO (The Stationery Office), 2019.
- AXELOS, ITIL 4 Practice Guide: Service Request Management, TSO (The Stationery Office), 2020.
- ISO/IEC 20000-1, Information technology: Service management: Part 1: Service management system requirements, International Organization for Standardization.
- Anderson, D. J., Kanban: Successful Evolutionary Change for Your Technology Business, Blue Hole Press, 2010.
- Vacanti, D. S., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- Reinertsen, D. G., The Principles of Product Development Flow: Second Generation Lean Product Development, Celeritas Publishing, 2009.
- Little, J. D. C., "A Proof for the Queuing Formula: L = λW," Operations Research, 9(3), 1961.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Strathern, M., "'Improving ratings': audit in the British University system," European Review, 5(3), 1997.
- Wikipedia, ITIL.
- Wikipedia, Process automation.
- Wikipedia, Service catalog.
- Wikipedia, Percentile.
- Wikipedia, Service-level agreement.
- Wikipedia, Goodhart's law.