5.0 Введение в часть 5: Продуктовые и бизнес-метрики

Первые четыре части этой книги измеряют внутренний мир инженерии: поставку, опыт разработчика и качество кода. Эта часть выходит за эту границу и задаёт вопрос, которому в конечном итоге служит каждая инженерная метрика, прямо или в несколько шагов в стороне: действительно ли эта работа помогла бизнесу и людям, использующим то, что она строит. Тема 1.3 установила результаты важнее выработки как руководящий принцип рано в этой книге; эта часть то место, где этот принцип встречает своё самое острое испытание, поскольку продуктовые и бизнес-результаты дальше всего отстоят от прямого контроля любого отдельного инженера и труднее всего чисто атрибутировать обратно к инженерному усилию.

Именно эта трудность делает эту часть важной. Организация, никогда не связывающая свои метрики поставки и качества с продуктовыми и бизнес-результатами, рискует прекрасно оптимизировать не то: быстро отгружать с отличным тестовым покрытием функцию, которой никто не пользуется, или поддерживать безупречное качество кода в системе, чьё основное ценностное предложение тихо перестало иметь значение для клиентов. Пять тем этой части, утёкшие дефекты, принятие функций, клиентские и бизнес-результаты, юнит-экономика и возврат инвестиций, дают инженерному руководству словарь для этой связи и дают бизнес-руководству способ оценивать инженерную инвестицию в терминах, которые для них действительно важны.

Для крупных команд эта часть часто то место, где доверие ко всей программе метрик выигрывается или теряется с исполнительными заинтересованными сторонами. Корпоративное руководство, одобряющее платформенные инвестиции в миллионы долларов, и государственные надзорные органы, одобряющие публичные технологические бюджеты, оба нуждаются в ответах, сформулированных в терминах бизнес-результатов или результатов для граждан, а не частоты развёртывания или тестового покрытия, как бы хорошо эти внутренние метрики ни управлялись. Эта часть то место, где тщательные, защищённые страховочными метриками метрики остальной части книги наконец соединяются с этим внешним, обращённым к результатам разговором.

Темы этой части

• 5.1 Доля утёкших дефектов и утечки качества: Метрика качества, наиболее прямо отражающая то, что фактически испытывают клиенты, в отличие от внутренних метрик качества части 4.
• 5.2 Метрики принятия и использования функций: Используется ли фактически то, что построила инженерия, и конкретные способы, которыми данные о принятии неправильно интерпретируются.
• 5.3 Метрики клиентских и бизнес-результатов: Связывание инженерной работы с результатами, которые фактически волнуют бизнес или публичную миссию.
• 5.4 Стоимость и юнит-экономика инженерии: Выражение инженерной стоимости в терминах, которые финансовая заинтересованная сторона может напрямую использовать.
• 5.5 Возврат инвестиций для инженерных инициатив: Построение защитимого, честного кейса ROI для крупной инженерной инвестиции и равная честность, когда кейс не выдерживает критики.

Как эти темы взаимосвязаны

Тема 5.1 начинает ближе всего к дому, качество, как его испытывают клиенты напрямую, и является естественным мостом от внутренних метрик качества части 4. Тема 5.2 задаёт следующий вопрос, как только качество учтено: пользуется ли кто-либо фактически тем, что было построено. Тема 5.3 расширяет объектив дальше к полному диапазону клиентских и бизнес-результатов, о которых заботится организация, из которых использование лишь один сигнал среди нескольких. Темы 5.4 и 5.5 затем превращают всю часть в финансовую: выражение инженерной стоимости и отдачи в терминах, напрямую связывающихся с решениями о бюджете и инвестициях, замыкая цикл, который открыла эта часть, спрашивая, действительно ли инженерное усилие помогло.

Темы этой части особенно сильно опираются на статистическую грамотность темы 1.6, поскольку бизнес- и продуктовые результаты часто зашумлены, искажены рыночными условиями и медленны в подтверждении, именно те условия, где ошибки, о которых предупреждает тема 1.6, наиболее вероятно производят уверенный, неправильный вывод. Читайте эту часть наряду с частью 7, где сдвиг к генеративному ИИ повышает ставки на правильное измерение результатов именно потому, что объём выработки, утверждают темы этой части на протяжении всего изложения, никогда не был правильной вещью для оптимизации с самого начала.