Метрики бэклога и его уточнения
Бэклог это очередь обещаний, поэтому измеряйте, сколько обещаний ждёт, как долго они ждут и какая часть ближайшей работы действительно готова, а растущую груду старых элементов считайте решением, которое вы пока не приняли.
Обзор и мотивация
Каждая команда, которая создаёт или эксплуатирует услугу, ведёт список работ, которые она согласилась рассмотреть. В гибкой практике этот список называется бэклогом продукта: это упорядоченный набор элементов, описывающий, что можно сделать для улучшения продукта. На потоковой доске его аналог это элементы, ожидающие левее начатых колонок. В управлении ИТ-услугами (ITSM), как его описывает ITIL, аналоги это открытые инциденты, запросы на обслуживание, проблемы и изменения, ожидающие в очереди. Всё это бэклоги. Они различаются тем, кто их наполняет, как быстро элементы должны уходить и что означает для элемента ожидание.
Большая часть данных поступает из системы отслеживания задач или инструмента ITSM. Метрики бэклога отвечают на простой вопрос: соразмерен ли объём обещанной работы возможностям её выполнить и стоит ли обещанная работа того, чтобы её делать? Бэклог, который растёт без предела, не описывает план. Он описывает список пожеланий, и каждый, кто его читает, от владельца продукта до клиента, поднявшего элемент, составит собственное представление о сроках. Честный ответ нередко звучит как «никогда», а цена умолчания оплачивается доверием, временем на перечитывание старых элементов и решениями, принятыми на устаревшей информации.
Уточнение это деятельность, которая сохраняет бэклог полезным. В гибкой практике уточнение бэклога продукта это непрерывная работа по добавлению деталей, оценок и порядка к элементам, чтобы их можно было начинать. Команды, которые берут работу по мере освобождения мощности, часто называют ту же деятельность пополнением или приведением бэклога в порядок. В ITSM она проявляется как сортировка, категоризация и приведение в порядок списка известных ошибок или проблем. Метрики этой темы измеряют размер и возраст бэклога, объём готовой работы и то, насколько хорошо уточнение удерживает перед командой окно готовой работы.
Постоянно встречаются четыре термина. Элемент это отдельная запись в бэклоге, например пользовательская история, дефект, запрос на обслуживание или запись о проблеме. Возраст элемента это время, прошедшее с момента попадания элемента в бэклог; он отличается от возраста рабочего элемента в измерении потока, где отсчёт начинается с начала работы (см. тему 2.1, Показатели потока). Готов означает, что элемент соответствует письменному определению готовности к началу, так что команда могла бы начать его и рассчитывать закончить в пределах окна уровня услуги. Уточнение это работа по приведению элементов в состояние готовности и по удалению элементов, которые никогда не будут выполнены.
Бэклоги продукта и услуги ведут себя по-разному, и смешение их это самая частая ошибка в этой области. Бэклог продукта это место, где элементы намеренно удерживаются, пока владелец продукта не решит их порядок. Ожидание там нормальное состояние, а старый элемент повод спросить, важен ли он ещё. Бэклог услуги из инцидентов и запросов это очередь с привязанным обещанием: клиент ждёт ответа в определённый срок. Ожидание там для клиента издержки с первой минуты. Бэклог продукта нужно прореживать, бэклог услуги нужно разгружать. Если разместить их на одном графике, график будет вводить в заблуждение.
Гибкий взгляд рассматривает бэклог как живой артефакт, которым владеет владелец продукта, достаточно короткий для понимания и упорядоченный по ценности. Взгляд ITIL рассматривает открытые записи как работу в процессе по согласованному уровню услуги, которой владеет практика. Оба взгляда опираются на один факт теории массового обслуживания: очередь, в которую элементы поступают быстрее, чем уходят, растёт, а время ожидания элемента растёт вместе с очередью (см. тему 2.3, Работа в процессе и теория очередей). Закон Литтла связывает размер очереди, интенсивность выбытия и среднее время пребывания элемента в системе, и именно поэтому размер и возраст бэклога это два взгляда на одно и то же.
Последнее различие сохраняет честность темы. Бэклог не мера производительности и не мера занятости команды. Большой бэклог может означать востребованный продукт, плохо прореженный список или команду с нехваткой ресурсов, и одно лишь число не скажет, что именно.
Ключевые принципы
- Измеряйте возраст так же, как размер. Размер показывает, сколько ждёт; возраст показывает, как долго, а самые старые элементы показывают, где избегают решений.
- Держите бэклоги продукта и услуги раздельно. Отложенная идея и ждущий клиент это разные вещи, и каждая требует собственного прочтения.
- Стремитесь к готовой работе, а не к длинному списку. Несколько недель готовой, хорошо упорядоченной работы ценнее тысячи элементов, на которые никто не смотрел.
- Прореживание это штатная функция. Удаление элемента, который вы не сделаете, честная работа, а доля отклонений, которая никогда не превышает нуль, это тревожный сигнал.
- Используйте распределения. Сообщайте медиану и 85-й процентиль возраста элементов и показывайте самый старый элемент, поскольку средние скрывают хвост.
- Описывайте команду и систему. Метрики бэклога показывают, как работа попадает к команде и как с ней обращаются, но никогда не показывают, как проявил себя отдельный человек.
- Привязывайте каждое число к решению. Если график бэклога не изменит ваших следующих действий, откажитесь от него.
Определения метрик
Приведённые ниже метрики применяются к одному бэклогу за раз. Сначала выберите бэклог (бэклог продукта, очередь инцидентов, очередь запросов на обслуживание, список проблем) и сообщайте каждую метрику по каждому бэклогу. Процентили используют метод процентиля, указанный в теме 1.6, Статистическая грамотность для метрик услуг.
| Метрика | Определение | Формула | Единица | Источник данных | Практика ITIL | Гибкий аналог | Периодичность |
|---|---|---|---|---|---|---|---|
| Размер бэклога | Число открытых элементов в названном бэклоге на момент времени | Число элементов со статусом «открыт» или «готов» на дату снимка; исключает элементы в работе и закрытые элементы | элементы | Снимок системы отслеживания задач или инструмента ITSM | Управление инцидентами; управление запросами на обслуживание; управление проблемами | Бэклог продукта; входная очередь | Еженедельно |
| Возраст бэклога | Распределение того, как долго ждут открытые элементы | Для каждого открытого элемента: дата снимка минус дата попадания в бэклог; сообщайте медиану, 85-й процентиль и самый старый элемент | дни | История создания и статусов в системе отслеживания задач или ITSM | Управление инцидентами; управление проблемами; непрерывное улучшение | Здоровье бэклога; обзор устаревших элементов | Еженедельно |
| Глубина готовой работы | Насколько далеко вперёд у команды есть готовая работа | Элементы, соответствующие определению готовности / среднее число элементов, завершённых в неделю за последние шесть периодов | недели | Флаг готовности в системе отслеживания задач и история пропускной способности | Бизнес-анализ; управление запросами на обслуживание | Определение готовности; уточнение | За период планирования |
| Охват уточнения | Доля ближайшего окна, которая готова | Элементы следующих двух двухнедельных периодов ожидаемой работы (или первые N по порядку), соответствующие определению готовности / элементы в этом окне | процент | Порядок, флаг готовности и плановая работа в системе отслеживания задач | Бизнес-анализ; обеспечение изменений (для плановых изменений) | Уточнение бэклога продукта | За период планирования |
| Отношение притока к оттоку бэклога | Поступают ли элементы быстрее, чем уходят | Элементы, добавленные за период / элементы, удалённые из бэклога по завершении или отклонению за тот же период; отношение выше 1 означает рост | отношение | События создания и решения в системе отслеживания задач или ITSM | Управление инцидентами; управление запросами на обслуживание; управление ёмкостью и производительностью | Интенсивность поступления и выбытия | Еженедельно |
| Доля отклонения бэклога | Доля уходящих элементов, удалённых без выполнения | Элементы, закрытые как «не будет делаться», дубликат или устаревшие / все элементы, покинувшие бэклог за период; исключает элементы, закрытые как выполненные | процент | Поле решения в системе отслеживания задач | Непрерывное улучшение; управление проблемами (обзор известных ошибок) | Прореживание бэклога; упорядочение владельцем продукта | Ежемесячно |
| Просрочка по целевому показателю в бэклоге услуги | Доля открытых элементов услуги, которые старше согласованного окна реагирования или решения | Открытые элементы, у которых прошедшее время превышает целевой показатель услуги / все открытые элементы в очереди; часы идут с момента регистрации и останавливаются только в состояниях, разрешённых письменным определением | процент | Инструмент ITSM с часами уровня услуги | Управление уровнем услуг; управление инцидентами; управление запросами на обслуживание | Полоса срочных задач; ожидание уровня услуги | Ежедневно или еженедельно |
Три вида часов нужно оговорить прямо. Возраст бэклога начинается, когда элемент создан в бэклоге, и заканчивается, когда он уходит по завершении или отклонению, поэтому повторно открытый элемент начинает новый возраст. Глубина готовой работы использует пропускную способность только по завершённым элементам, никогда не плановую скорость, поскольку плановая скорость это прогноз. Просрочка по целевому показателю в бэклоге услуги использует часы уровня услуги, которые могут отличаться от возраста бэклога из-за разрешённых пауз (см. тему 5.1, Метрики SLA, OLA и XLA).
Рекомендации
Настройте бэклог так, чтобы его можно было измерять
1. Назовите каждый бэклог и его владельца. У каждого бэклога в охвате один владелец, одна цель и один список типов элементов. Бэклог продукта принадлежит владельцу продукта; очередь инцидентов принадлежит службе поддержки или группе решения. Без названного владельца никто не решает, когда старому элементу пора уйти.
2. Разделите удерживаемые элементы и обещания в очереди. Помечайте каждый элемент либо как идею, которую команда удерживает для упорядочения, либо как обязательство, которого кто-то ждёт. Сообщайте размер и возраст бэклога отдельно для каждого вида. Запрос в поддержку, лежащий в бэклоге продукта, это обещание в очереди, оказавшееся не на своём месте, и ему нужны часы услуги.
3. Напишите определение готовности и держите его коротким. Определение готовности перечисляет немногое, что команде нужно знать перед началом: желаемый результат, грубый размер, условия приёмки и любую зависимость. Уложите его в несколько строк и пересматривайте, когда оно перестаёт предсказывать гладкую работу. Длинный контрольный список превращает уточнение в бумажную работу и поощряет проставление галочек.
4. Фиксируйте дату попадания и причину ухода. Возраст и доля отклонения зависят от двух полей: даты попадания элемента и причины его ухода. Сделайте оба поля обязательными в инструменте и добавьте управляемый список причин ухода, например «выполнено», «дубликат», «устарело» и «не будет делаться». Отсутствующие даты самая частая причина непригодного возраста бэклога (см. тему 1.5, Источники данных и инструментирование).
Читайте размер и возраст вместе
5. Сообщайте возраст бэклога как распределение. Показывайте медиану, 85-й процентиль и самый старый элемент, а также гистограмму по возрастным диапазонам, например до 30 дней, от 30 до 90, от 90 до 180 и свыше 180. Ровный средний возраст может скрывать растущую груду древних элементов, потому что новые элементы тянут среднее вниз. Вид «самый старый элемент» спрятать труднее всего.
6. Используйте отношение притока к оттоку, чтобы увидеть рост рано. Отношение, устойчиво превышающее 1, означает, что бэклог будет расти, каким бы ни был его нынешний размер. Стройте его как скользящую четырёхнедельную величину, чтобы сгладить праздники и недели выпусков. Сопоставляйте его с пропускной способностью, чтобы команда видела, откуда растёт бэклог: из-за растущего спроса или из-за падающего выпуска (см. тему 2.1, Показатели потока).
7. Переводите размер во время через пропускную способность. Разделите размер бэклога на среднее число элементов, завершаемых за период, и получите грубое число периодов ожидающей работы: это прямое применение закона Литтла. Прямо оговаривайте, что это среднее, а не обещание, и показывайте диапазон по меньшей и большей пропускной способности за недавние периоды. Бэклог продукта из сотни элементов, равный году работы, это разговор об объёме, а не расписание.
Поддерживайте движение уточнения
8. Стремитесь к окну готовой работы, а не к полностью готовому бэклогу. Уточняйте столько, сколько нужно на ближайшие одну-три недели работы, и не больше. Детали, добавленные к элементу, который не начнут шесть месяцев, обычно устаревают, поэтому измеряйте глубину готовой работы и позволяйте ей колебаться внутри целевой полосы, которую команда выбирает и пересматривает, например от одной до трёх недель работы. Глубина заметно выше полосы это потери; глубина меньше одной недели работы это риск простоя или поспешного планирования.
9. Измеряйте охват уточнения на элементах, которые вот-вот начнут. Охват уточнения смотрит только на верх порядка. Он отвечает на вопрос, который задаст встреча по планированию: если бы мы начали сейчас, были бы следующие элементы готовы? Сообщайте его непосредственно перед планированием, когда промах ещё можно исправить, а не после.
10. Сделайте уточнение регулярной и короткой деятельностью. Гибкие руководства, включая Руководство по Scrum, описывают уточнение как непрерывную деятельность и оставляют её форму на усмотрение команды. Многие команды находят, что короткая частая сессия работает лучше одной длинной встречи.
Прореживайте и пересматривайте
11. Прореживайте по расписанию и сообщайте долю отклонения. Каждый месяц просматривайте самые старые элементы и спрашивайте о каждом: будем ли мы делать это в ближайшие шесть месяцев, а если нет, зачем его хранить? Закрытие элемента с указанной причиной не провал. Команда, которая никогда не отклоняет, скорее всего копит, а команда, которая отклоняет большую часть полученного, скорее всего принимает работу, от которой следовало отказаться на входе.
12. Работайте с бэклогами услуг через разгрузку, а не прореживание. Для очередей инцидентов и запросов первый вопрос в том, укладываются ли элементы в окно услуги. Отслеживайте долю просроченных по целевому показателю и самый старый открытый элемент и держите полосу срочных задач для элементов, которые ждать не могут. Списки проблем и известных ошибок лежат между двумя мирами: они удерживаются, пока не будет профинансировано исправление, поэтому пересматривайте их как бэклог продукта, с указанной датой пересмотра для каждой записи (см. тему 4.6, Технический долг и известные ошибки).
Способы подгонки и ограждения
| Метрика | Как её подгоняют | Парное ограждение (метрика или практика) |
|---|---|---|
| Размер бэклога | Массовое закрытие элементов как устаревших, дробление элементов для вида занятости или сокрытие работы в побочных списках и таблицах | Доля отклонения бэклога с причинами ухода; периодическое сравнение инструмента с реальным списком запросов; отзывы клиентов об отброшенных элементах |
| Возраст бэклога | Сброс даты попадания клонированием или пересозданием старых элементов; перенос элементов между бэклогами; повторное открытие вместо повторной подачи, чтобы изменить часы | Аудит клонированных и перенесённых элементов; обзор самых старых элементов; возраст, измеряемый от первого создания по связанным записям |
| Глубина готовой работы | Пометка элементов готовыми без проверки; раздувание глубины подробными элементами для малоценной работы | Выборка готовых элементов, прочитанных по определению; доля доработки или возврата на уточнение при начале работы |
| Охват уточнения | Проставление флага готовности ради числа; сужение окна, чтобы считалось меньше элементов | Число элементов, возвращённых после планирования; достижение целей поставки и изменение объёма в середине периода (см. тему 2.5, Метрики прогнозирования и планирования поставки) |
| Отношение притока к оттоку бэклога | Быстрое закрытие лёгких элементов ради роста оттока или отказ принимать новые элементы на входе ради снижения притока | Возраст самых старых элементов; доля отклонения; доля запросов, отклонённых без причины; неудовлетворённые потребности по сообщениям клиентов |
| Доля отклонения бэклога | Отклонение элементов, которые пользователи всё ещё хотят, ради уменьшения размера; или уклонение от отклонений, чтобы число выглядело мягким | Просмотр выборки отклонённых элементов вместе с обратившимся; доля повторного открытия и повторной подачи отклонённых элементов |
| Просрочка по целевому показателю в бэклоге услуги | Остановка часов статусом «ожидание клиента», понижение приоритета либо закрытие и повторное открытие для сброса окна | Доля времени в состояниях паузы; доля повторных открытий (см. тему 1.2, Закон Гудхарта и психология метрик); удовлетворённость пользователей по закрытым заявкам |
Здоровая картина выглядит так: размер бэклога стабилен или медленно снижается, самых старых элементов немного, и у каждого есть владелец и названная причина, а ближайшее окно в основном готово. Отношение притока к оттоку держится около 1, доля отклонения не равна нулю и не доминирует, а охват уточнения растёт без того, чтобы плановая работа становилась более хрупкой. Когда числа выглядят хорошо, но клиенты по-прежнему сообщают, что с их запросами ничего не происходит, доверяйте клиентам и проверяйте данные.
Компромиссы: плюсы и минусы
| Подход | Сильная сторона | Слабая сторона |
|---|---|---|
| Небольшой, активно прореживаемый бэклог продукта | Легко понять и держать упорядоченным; честен в отношении мощности | Риск отбросить идеи, которые позже оказались бы важны; обратившиеся могут чувствовать себя проигнорированными |
| Большой сохраняемый бэклог | Сохраняет каждую идею и запрос; полезная история | Дорог в чтении; устаревшие элементы вводят планирование в заблуждение и скрывают настоящие приоритеты |
| Глубокое готовое окно (уточнено на много недель) | Гладкое планирование; меньше неожиданностей при начале работы | Уточнённые детали устаревают; усилия тратятся на работу, которая может так и не начаться |
| Неглубокое готовое окно (около недели) | Мало напрасных деталей; остаётся гибким | Планирование может застопориться, если несколько элементов не готовы; меньше времени, чтобы заметить зависимости |
| Строгое определение готовности | Меньше расплывчатых стартов; предсказуемая работа | Может превратиться в барьер, который замедляет поток и поощряет заполнение для галочки |
| Лёгкое определение готовности | Быстро; доверяет команде | Больше открытий по ходу работы; больше изменений в середине периода |
Практический ответ состоит в том, чтобы держать бэклог достаточно малым, чтобы прочитать его за один присест, удерживать готовое окно примерно в одну-три недели работы и делать определение готовности достаточно коротким, чтобы люди его помнили. Очереди услуг требуют противоположной позиции: цель не в малости, а в завершении в пределах согласованного окна. Выберите в каждой строке ту ячейку, что подходит вашему контексту, и запишите причину.
Вопросы для обсуждения с командой
1. Если бы мы сегодня перестали добавлять элементы, сколько времени заняла бы разгрузка бэклога при нашей недавней пропускной способности, и кажется ли это число правдоподобным? Начните с деления размера бэклога на типичное число элементов, завершаемых за период, и покажите диапазон по лучшему и худшему недавним периодам. Спросите, верит ли команда результату и куда на самом деле ушло бы время. Если для бэклога продукта число больше года, спросите, какие элементы можно убрать так, чтобы никто этого не заметил.
2. Какие пять самых старых элементов и кто решил, что они всё ещё должны быть здесь? Прочитайте вслух пять самых старых элементов с датами попадания. По каждому спросите назвать владельца и причину, по которой он остаётся: ожидание зависимости, сознательная отсрочка или пренебрежение. Согласуйте действие по каждому: запланировать, отклонить или записать, почему он остаётся и когда к нему вернуться.
3. Что здесь значит «готов» и не из-за ли неготовых элементов случились наши недавние неожиданности? Попросите каждого записать определение готовности своими словами, затем сравните. Различия это первый вывод. Оглянитесь на элементы, вызвавшие вопросы в середине периода или доработку, и спросите, что сделало бы их готовыми. Ведущему следует удержаться от добавления пункта в контрольный список на каждую неожиданность и вместо этого выбрать один-два, которые предотвратили бы больше всего неприятностей.
4. В каких из наших бэклогов лежат идеи, а в каких обещания кому-то? Перечислите каждый бэклог и разложите его элементы на два вида. Запросы в поддержку, инциденты и принятые перед клиентом обязательства это обещания, и им нужны часы услуги; идеи и улучшения удерживаются для упорядочения. Обсудите, где эти виды смешаны и что это делает с графиком возраста. Результатом может быть простая метка и фильтр, позволяющие сообщать о каждом виде отдельно.
5. Когда мы в последний раз убирали элементы намеренно и как отреагировали обратившиеся? Прореживание часто кажется рискованным, поэтому посмотрите на свидетельства. Проверьте долю отклонения и просмотрите несколько отклонённых элементов. Спросите, сообщили ли об этом обратившемуся и просил ли кто-нибудь вернуть элемент. Ведущему следует помочь группе согласовать простое сообщение для обратившихся («мы не планируем это делать; вот почему; поднимите вопрос снова, если обстоятельства изменятся»), чтобы прореживание стало рутинным и уважительным.
6. Если бы мы хотели, чтобы наши графики бэклога выглядели лучше, никому не помогая, что бы мы сделали? Проведите обзор подгонки из темы 1.2 для каждой метрики бэклога. Вероятные ответы: массовое закрытие старых элементов, клонирование элементов для сброса возраста, досрочная пометка элементов готовыми и сужение окна, которое считает охват. По каждому ответу проверьте, поймало бы это ограждение из таблицы выше. Запишите те, что проскользнули бы, и выберите одну новую проверку на следующий квартал.
Четыре точки зрения
Продуктовые команды и команды поставки
Команды поставки используют метрики бэклога, чтобы сохранять планирование спокойным. Глубина готовой работы и охват уточнения говорят команде, будет ли следующая сессия планирования гладкой, а возраст бэклога показывает, какие обещания тихо гниют. Хорошая привычка: просматривать возраст, отношение притока к оттоку и глубину готовой работы несколько минут на каждой сессии уточнения, а затем действовать по одному пункту. Команды должны публиковать наружу небольшой стабильный набор, а подробные возрастные диапазоны оставлять для собственного использования (см. тему 2.5, Метрики прогнозирования и планирования поставки).
Команды услуг и эксплуатации
Команды эксплуатации ведут очереди с часами. Их главное показание это доля открытых элементов, просроченных по целевому показателю, вместе с самым старым открытым элементом, с разбивкой по приоритету и состоянию паузы. Спискам проблем и известных ошибок нужна дата пересмотра у каждой записи, чтобы удерживаемые элементы не становились постоянными. Командам также стоит следить за отношением притока к оттоку для очереди инцидентов, поскольку отношение выше 1 в течение нескольких недель это ранний признак нехватки персонала или повторяющейся причины (см. тему 3.2, Объём и приоритет инцидентов).
Руководство и управление
Руководители видят в бэклоге заявление о намерениях. Очень большой бэклог говорит им, что организация обещает больше, чем может выполнить, а быстро сокращающийся может означать прореживание или снижение спроса. Спрашивайте, какое решение информирует число. Выделяйте время на уточнение и прореживание, не ставьте целевых показателей на сырой размер бэклога и просите распределение возраста и причины отклонений, когда представляют цифру размера (см. тему 1.3, Результаты важнее выпуска: что выбрать для измерения).
Клиенты и пользователи
Клиенты воспринимают бэклог как молчание. Элемент, поднятый полгода назад без ответа, говорит больше любого графика. Пользователи ценят правду: это запланировано, это не запланировано и вот почему, или это ждёт зависимости. Дайте обратившимся способ видеть статус своих элементов и считайте отклонённые элементы задачей общения, а не очистки данных (см. тему 3.5, Метрики выполнения запросов на обслуживание).
На практике: пример гибкого ITIL
Страховая компания среднего размера в регионе эксплуатирует внутреннее приложение для обработки страховых случаев с продуктовой командой и отдельной службой поддержки. Числа в этом примере условные.
Бэклог продуктовой команды содержит 412 элементов. Медианный возраст 138 дней, 85-й процентиль 410 дней, самому старому элементу 29 месяцев. Команда завершает около 14 элементов за две недели, так что бэклог это примерно 29 двухнедельных периодов работы при недавней пропускной способности. Охват уточнения на следующие два двухнедельных периода 55 процентов, и планирование часто затягивается, поскольку команда обнаруживает недостающие детали. Служба поддержки показывает иную картину: 63 открытых запроса, из них 9 процентов просрочены по целевому показателю, а отношение притока к оттоку близко к 1.
Владелец продукта просит меньшее число и предлагает целевой показатель менее 200 элементов к концу квартала. Команда не хочет считать это самостоятельной целью. Вместо этого она проводит обзор. Элементы помечаются как удерживаемые идеи или обещанная работа, и оказывается, что 38 из 412 это запросы в поддержку, которые, как клиентам сказали, будут обработаны. Их переносят в очередь услуги с часами услуги. Команда читает самые старые 40 элементов и находит, что 22 устарели или дублируют другие. Их закрывают с причинами ухода и сообщают обратившимся. Команда задаёт готовую полосу в один-два двухнедельных периода и тратит короткую еженедельную сессию на уточнение только верха порядка.
За три двухнедельных периода размер бэклога падает до 301, а доля отклонения за месяц составляет 31 процент, что намеренно высоко и отмечено в обзоре. Охват уточнения растёт до 88 процентов. Беглый взгляд на данные выявляет риск подгонки: размер бэклога упал быстрее ожидаемого, потому что двое членов команды склонировали несколько стареющих элементов в новые, чтобы уйти от списка старых элементов. Команда замечает это, когда график самых старых элементов перестаёт совпадать с выборкой отклонённых. Договариваются измерять возраст от первого создания по связанным записям и пересматривать клоны на каждой сессии прореживания. Решение, записанное для руководства: отказаться от целевого показателя размера и вместо этого ежеквартально сообщать распределение возраста, готовое окно и причины отклонений.
Отраслевой взгляд
Стартап. Бэклог часто это единый список в голове основателя или простая доска. Отслеживайте только возраст самых старых элементов и готовность следующей порции работы. Прореживайте жёстко и часто, поскольку для идеи трёхмесячной давности правильный ответ нередко забыть её.
Малый бизнес. Работа над продуктом и услугой обычно лежит на одной команде, поэтому бэклог смешивает удерживаемые идеи и обещания клиентам. Разделите их меткой как можно раньше. Единый список, читаемый еженедельно на короткой встрече, лучше сложных метрик. Сначала следите за возрастом элементов, видимых клиентам, поскольку один забытый запрос может стоить отношений.
Предприятие. Множество команд и очередей умножает способы неверно прочитать бэклог. Определите метрики один раз, вместе с часами и причинами ухода, и не сводите размер бэклога продукта в одну портфельную цифру. Сравнивайте команду с её собственной историей, никогда не с другой командой с другой работой (см. тему 2.4, Метрики потока создания ценности). Спискам проблем и известных ошибок нужен собственный ритм пересмотра.
Государственный сектор. Обязательства перед гражданами, установленные законом сроки реагирования и аудиторский след формируют очереди услуг. Считайте установленные законом часы фиксированными входными данными и сообщайте долю просроченных по целевому показателю с использованными определениями. Бэклоги продуктов могут быть ограничены раундами финансирования и закупками, поэтому готовое окно может быть длиннее, чем в коммерческой команде. Сохраняйте причины отклонений видимыми, поскольку публичная подотчётность делает молчаливое отбрасывание рискованным.
Бизнес-обоснование: мотивация, ROI и TCO
Стоимость этих метрик скромна. Большая часть данных уже лежит в системе отслеживания задач или инструменте ITSM. Затраты это обязательные дата попадания и причина ухода, короткая ежемесячная сессия прореживания, несколько минут на уточнении для просмотра графиков возраста и готовности и некоторые усилия по разделению бэклогов продукта и услуги. Для начала достаточно таблицы или встроенных отчётов инструмента, покупать новый продукт не нужно.
Отдача складывается из избегнутых потерь и более ясных обещаний. Команды, которые держат готовое окно, тратят меньше времени планирования на повторное выяснение смысла элемента, а команды, которые прореживают, перестают перечитывать элементы, которые никогда не будут сделаны. Клиенты быстрее получают честные ответы, что снижает число повторных обращений и эскалаций. Описывайте выгоду через закономерности, которые команда может проверить сама: более короткие сессии планирования, меньше элементов, возвращённых на уточнение после начала работы, меньше напоминаний о старых запросах и меньше неожиданностей, когда руководство спрашивает, что находится в конвейере. Эта тема не приводит процентов, поскольку их нельзя дать без источника. Измерьте собственную базовую линию за квартал и сравните.
Антипаттерны и ловушки
- Рассматривать размер бэклога как оценку производительности или результативности. Размер зависит от спроса, объёма и привычек прореживания. Сообщайте размер вместе с возрастом и причинами отклонений и никогда не сравнивайте по нему команды.
- Смешивать удерживаемые идеи и обещания клиентам в одном списке. Тогда график возраста читается как пренебрежение, а часы услуги отсутствуют. Разделите их меткой и сообщайте каждый вид отдельно.
- Уточнять всё. Подробные элементы, которые не начнут месяцами, устаревают. Держите готовое окно и уточняйте незадолго до потребности.
- Никогда не отклонять. Постоянно растущий список делает ложным любое утверждение об объёме. Прореживайте по расписанию и каждый раз записывайте причину.
- Сбрасывать возраст клонированием или переносом элементов. Это льстит графику и теряет историю. Измеряйте возраст от первого создания по связанным записям и проверяйте клоны.
- Определение готовности как барьер. Если оно блокирует работу, которую команда могла бы безопасно начать, оно замедляет поток. Держите его коротким и позволяйте команде обойти его с указанной причиной.
- Целевые показатели на сырой размер. Целевой показатель «менее N элементов» провоцирует массовое закрытие. Ставьте целью возраст самых старых элементов или долю просроченных по целевому показателю услуги, с ограждением.
- Использовать средний возраст. Новые элементы тянут среднее вниз, пока старые копятся. Показывайте медиану, 85-й процентиль и самый старый элемент.
Модель зрелости
| Измерение | 1 Начальный | 2 Развивающийся | 3 Стандартизованный | 4 Управляемый | 5 Согласованный |
|---|---|---|---|---|---|
| Определения и данные | Даты попадания и причины ухода отсутствуют или непоследовательны | Некоторые команды фиксируют даты; определения готовности различаются | Одно письменное определение готовности и возраста бэклога; обязательные дата попадания и причина ухода | Качество данных проверяется выборкой; возраст измеряется с учётом клонов и переносов | Определения общие для команд и поставщиков и пересматриваются, когда перестают информировать решения |
| Здоровье бэклога | Бэклог растёт незаметно; прореживания нет | Случайная чистка, когда список становится неуправляемым | Прореживание по расписанию; бэклоги продукта и услуги разделены | Размер, возраст, отношение притока к оттоку и доля отклонения отслеживаются во времени и пересматриваются с ограждением | Политика бэклога настроена между командами под спрос и мощность; клиенты видят статус своих элементов |
| Уточнение | Детали добавляются по ходу планирования без системы | Регулярные сессии у некоторых команд | Короткое регулярное уточнение с согласованным готовым окном | Охват и глубина готовой работы пересматриваются и связываются с результатами поставки | Уточнение общее для команд и зависимостей; окно подстраивается под условия |
| Использование в решениях | Числа показывают, только когда что-то идёт не так | Сообщаются руководству без обсуждения | Команда пересматривает возраст и глубину готовой работы на уточнении | За обзором следует финансируемая работа по улучшению | Свидетельства бэклога информируют портфельные решения и решения о мощности по всей организации |
Контрольный список
- У каждого бэклога есть названный владелец и заявленная цель.
- Удерживаемые идеи и обещания клиентам помечены и учитываются раздельно.
- У каждого элемента есть обязательная дата попадания и причина ухода из управляемого списка.
- У команды есть короткое письменное определение готовности.
- Возраст бэклога сообщается как медиана, 85-й процентиль и самый старый элемент.
- Отношение притока к оттоку показывается как скользящая величина рядом с пропускной способностью.
- Готовое окно согласовано, а глубина готовой работы сообщается относительно него.
- Охват уточнения сообщается перед планированием, а не после.
- Ежемесячная сессия прореживания стоит в календаре, а доля отклонения сообщается.
- Очереди услуг показывают долю просроченных по целевому показателю и использование состояний паузы.
- Обзор подгонки для метрик бэклога проведён в этом квартале.
Промпты для ИИ
Оцените здоровье бэклога.
Я работаю с [название команды], которой принадлежит [тип бэклога, например
бэклог продукта или очередь инцидентов]. Вот сводка по бэклогу: [число
элементов], распределение возраста [медиана, 85-й процентиль, самый старый
элемент], элементов завершается в [неделю] [числа], элементов добавляется в
[неделю] [числа], причины отклонений [количества]. Наше определение
готовности: [определение].
Объясните, что может означать это сочетание чисел, перечислив не менее трёх
разных объяснений, и предложите, какие дополнительные данные позволили бы их
различить. Не выдумывайте эталонные значения или целевые показатели. Перечислите
свои допущения и всё, что вы не смогли определить из предоставленных мною данных.
Составьте определение готовности.
Помогите составить короткое определение готовности для [название команды],
которая работает над [тип работы]. Наши нынешние проблемы с неготовыми
элементами: [список проблем]. Предложите не более шести критериев, укажите,
какую проблему решает каждый критерий, и опишите, как команда могла бы проверить
каждый из них менее чем за минуту. Также предложите, когда команде следует
разрешать начинать элемент, не соответствующий определению. Не копируйте текст
никаких рамок. Перечислите свои допущения.
Спланируйте сессию прореживания бэклога.
Спланируйте сессию прореживания бэклога команды [название команды]
длительностью [продолжительность]. В бэклоге [число] элементов, самые старые
имеют возраст [возраст]. Мы используем такие причины ухода: [список]. Предложите
повестку, вопросы, которые стоит задавать по каждому старому элементу, простое
сообщение для обратившихся, чьи элементы удаляются, и данные, которые нужно
записать после сессии. Укажите, как сессию можно подогнать и как это
обнаружить. Не выдумывайте статистику. Перечислите свои допущения.
Разделите работу над продуктом и услугой в смешанном бэклоге.
Вот выборка из [число] элементов нашего объединённого бэклога в [название
инструмента] с полями [список полей]. Классифицируйте каждый элемент как
удерживаемую идею, обещание клиенту с ожиданием по услуге или неясный и
объясните свои рассуждения. Затем предложите метки и простое правило
маршрутизации будущих элементов. Сообщайте о закономерностях, а не об
отдельных людях, и не домысливайте факты, которых нет в данных. Перечислите
свои допущения и элементы, которые вы не смогли классифицировать.
[вставьте элементы, удалив персональные данные]
Навыки ИИ
- Agile ITIL Metrics skill: используйте, чтобы найти парное ограждение и соседние темы для метрики бэклога, которую вы собираетесь ввести.
- Agile ITIL Metrics maintainer skill: используйте, чтобы проверить, что пересмотренная тема о бэклоге сохраняет согласованность способов подгонки, ограждений и перекрёстных ссылок.
Ключевые выводы
- Бэклог это очередь обещаний, поэтому читайте размер и возраст вместе и показывайте самые старые элементы.
- Держите удерживаемые идеи и обещания клиентам в отдельных представлениях, поскольку ожидание в них означает разное.
- Стремитесь к короткому окну готовой работы и измеряйте охват уточнения на элементах, которые вот-вот начнут.
- Прореживайте по расписанию, записывайте, почему элементы уходят, и считайте нулевую долю отклонения тревожным сигналом.
- Ставьте целью возраст и окна услуг, а не сырой размер, и сопровождайте каждую метрику бэклога ограждением.
- Метрики бэклога описывают, как работа попадает к команде и как с ней обращаются, и никогда не ранжируют людей.
Источники и дополнительное чтение
- Schwaber, K., and Sutherland, J., The Scrum Guide, 2020, https://scrumguides.org/scrum-guide.html.
- Vacanti, D., Yeret, Y., et al., The Kanban Guide, 2020, https://kanbanguides.org/.
- Vacanti, D., Actionable Agile Metrics for Predictability: An Introduction, Daniel S. Vacanti, Inc., 2015.
- Reinertsen, D. G., The Principles of Product Development Flow: Second Generation Lean Product Development, Celeritas Publishing, 2009.
- Cohn, M., User Stories Applied: For Agile Software Development, Addison-Wesley, 2004.
- Anderson, D. J., Kanban: Successful Evolutionary Change for Your Technology Business, Blue Hole Press, 2010.
- AXELOS, ITIL Foundation: ITIL 4 Edition, TSO, 2019.
- Wikipedia, Product backlog.
- Wikipedia, ITIL.
- Wikipedia, User story.
- Wikipedia, Little's law.
- Wikipedia, Percentile.
- Wikipedia, Issue tracking system.