度量框架
度量框架是一种决定哪些数字配得上占据版面的方法,最好的框架都从目标和问题出发,所以应选择最轻量、又能让每个指标都与某个决定相联的框架。
概述与动因
想度量自己工作的团队很早就会遇到一个问题:可能的数字成千上万,却没有在其中作选择的规则。度量框架提供这条规则。它指明一个起点(一个目标、一项战略、少数几个关键条件),并描述如何从这个起点走到一小组人们会阅读并据以行动的度量。各种框架的词汇不同,但共享一个目的:让每个数字都与拥有它的理由相联。
本主题涵盖在几乎每个运营服务的组织里都会出现的五个思想。第一个是目标-问题-指标(GQM)方法,由软件工程研究者 Victor Basili 及其同事提出。它从目标出发,提出能够显示目标是否达成的问题,然后才选择指标。第二个是目标与关键结果(OKR),一种设定目标的方法,由 Andrew Grove 在英特尔推广,后来经 John Doerr 在 Google 推广。目标说明团队想去哪里,少数几个关键结果说明它如何知道自己已经到达。第三个是平衡计分卡,由 Robert Kaplan 和 David Norton 于 1992 年提出,它要求组织同时审视财务结果、客户、内部流程以及学习与成长,使任何单一视角都不占主导。
第四和第五个思想更古老,也更朴素。关键成功因素(CSF)是目标要得以达成就必须成立的条件,关键绩效指标(KPI)则度量这个条件保持得有多好。ITIL,即由 Axelos、后来由 PeopleCert 发布的 IT 服务管理(ITSM)框架,用的正是这种配对。在 ITIL 4(截至 2026 年 10 月广泛使用的版本)中,关于度量与报告以及持续改进的指导,告诉从业者为服务或实践定义 CSF,然后选择能显示相对于它们的进展的 KPI。更广泛的 ITIL 方法在这里只作概述,不作转载。
敏捷与 ITIL 的视角在这一领域有益地交汇。敏捷实践偏爱短周期的学习:团队提出假设,尝试一些做法,检视结果,然后调整。ITIL 实践偏爱明确定义的服务、约定的服务级别和有管理的改进流程。像 GQM 这样的框架适合敏捷"问团队想学到什么"的习惯。平衡计分卡适合 ITIL 向领导层展示服务健康全貌的需要。OKR 居于两者之间,因为它们以短周期评审,却以治理机构能看懂的成果语言书写。
本主题反复出现三个术语。目标(goal)是对具名受众的预期成果的陈述。问题(question)是你要说明目标是否达成所需要知道的事。指标(metric)是对有助于回答某个问题的事物进行计数或计时的明确定义的方式。这些框架对第三个术语的处理方式不同,但都坚持它排在最后,位于目标和问题之后。这个顺序是防范古德哈特定律所描述的失败的最强保护(见主题 1.2,古德哈特定律与指标心理学),即数字取代了它本该服务的目的。
没有哪个框架能弥补糟糕的目标选择,也没有哪个能免去护栏的需要。把框架当作一次交谈的脚手架,并预期它会随工作的变化而变化。尤其是 KPI,可能变成虚荣指标,即只增不减、从不为决定提供依据的计数,例如处理的工单总数。为什么要度量的更宽泛的理由,在别处已有阐述(见主题 1.1,为何衡量敏捷 ITIL)。
各种框架有何不同
这些框架回答的问题略有不同,混合使用很常见。下表可作为一幅地图。
| 框架 | 起点 | 典型产出 | 最适用于 | 典型期限 |
|---|---|---|---|---|
| 目标-问题-指标 | 针对产品、流程或服务的具体目标 | 由目标、问题和指标构成的树 | 为一个团队或服务设计度量项目 | 数周至数月 |
| OKR | 针对下一个周期的有抱负的目标 | 少数几个目标,每个带有可度量的关键结果 | 使各团队围绕成果对齐并聚焦精力 | 季度 |
| 平衡计分卡 | 组织的战略 | 四个视角下的目标与度量 | 向领导层展示全貌,并把战略与运营联系起来 | 年度 |
| CSF 与 KPI | 一项服务、实践或目标 | 少数几个必须成立的条件,各带指标 | 运营已定义的 ITIL 实践并报告其健康状况 | 持续,定期评审 |
关键原则
- 从目标出发,然后是问题,然后是指标。先选的指标,无法判断是否有用。
- 明确受众和决定。每个目标都点出谁受益,每个指标都点出谁将据以行动。
- 保持集合精简。少数被阅读和信任的度量,胜过一长串被匆匆扫过的清单。
- 平衡视角。把速度与质量、成本与体验、短期产出与长期学习配对,使任何框架都不奖励一个而牺牲另一个。
- 把目标当作假设。目标及其数字是一个可能出错的赌注,所以要按计划评审,并附上记录在案的理由来更改。
- 用框架描述团队和服务,绝不用它给人排名。计分卡、关键结果和 KPI 属于团队或服务。
- 有意识地组合框架。说明哪个框架拥有哪个决定,这样同一个数字就不会被定义三次。
指标定义
下面的指标度量的是使用中的框架的健康状况,而不是服务的健康状况。它们显示目标与指标是否仍然相联,并且无论团队选择哪个框架都适用。计数按团队或服务,绝不按个人。
| 指标 | 定义 | 公式 | 单位 | 数据来源 | ITIL 实践 | 敏捷对应 | 频率 |
|---|---|---|---|---|---|---|---|
| 目标可追溯性 | 能追溯到书面目标和问题的已报告指标所占比例 | 有记录的目标和问题的指标数 / 已报告的指标数 | 百分比 | 指标登记册(见主题 1.4,指标治理与归属) | 度量与报告;持续改进 | 交付目标;产品目标 | 每季度 |
| 关键结果得分分布 | 关键结果期末得分的分布,以各档位所占比例表示 | 各得分档位(例如 0.0 至 0.3、0.4 至 0.6、0.7 至 1.0)的关键结果数 / 该期间已评分的关键结果数;不含附记录理由被舍弃的关键结果 | 每档百分比 | OKR 跟踪工具或团队文档 | 持续改进;服务级别管理 | 季度规划;评审 | 每季度 |
| 视角覆盖率 | 四个平衡计分卡视角中,至少有一项有当前值的度量的视角所占比例 | 上一期间有度量被报告的视角数 / 四 | 百分比 | 计分卡或仪表板 | 度量与报告;服务价值系统治理 | 利益相关方评审(客户与学习视图) | 每季度 |
| 指标评审年龄 | 自上次评审每个 KPI 的定义和目标以来的时间 | 评审日期减去上次评审的日期;时钟从最近一次记录的评审开始,到报告日期停止;报告中位数和最老的 | 天 | 指标登记册变更日志 | 持续改进;度量与报告 | 回顾会议的行动 | 每季度 |
| CSF-KPI 覆盖率 | 至少有一个当前被报告的 KPI 的关键成功因素所占比例 | 有当前 KPI 的 CSF 数 / 为服务或实践定义的 CSF 数 | 百分比 | 实践或服务文档;指标登记册 | ITIL 实践指南中的 CSF 与 KPI 方法 | 完成的定义;工作约定 | 每季度 |
只有当目标和问题都已写明,且受众已点名,目标可追溯性才算该指标已被追溯;只有目标是不够的。关键结果得分分布应当作分布来读,而不是平均值,因为平均值会掩盖把一切都放水的团队和一切都失败的团队。指标评审年龄不含该期间退役的指标。
建议
选择并组合框架
1. 选择能完成任务的最小框架。只有一个改进问题的单个服务团队,很少需要完整的平衡计分卡。GQM 常常就足够了,因为它有明确的停止点:一个目标、几个问题和几项指标构成的树。仅当某个决定需要时再增加结构。
2. 把目标分三部分来写:目的、对象和视角。GQM 的目标传统上被表述为:从某个视角,改进某个对象的某项质量,例如为依赖服务台的人改进事件更新的清晰度。这个结构迫使你说清谁受益。如果一个目标没有视角,它多半只是口号。
3. 提出一个人可以用一个简短的故事来回答的问题。"用户在报告问题后多快能得到回复?"是个好问题,因为你可以想象一个答案及其背后的证据。"我们的表现如何?"则不是。每个目标争取三到五个问题,并预期其中一些要靠访谈或抽样而不是数字来回答。
4. 最后选指标,并且选不止一个。对每个问题,写出候选指标、数据来源和操纵途径(见主题 1.5,数据来源与埋点)。至少包括一个与其他指标相互牵制的指标,例如响应时间旁边配重开率。如果某个问题没有可行的指标,就直说,并规划一次定性检查。
5. 决定哪个框架拥有哪个决定。一种常见安排是,让平衡计分卡或类似的东西保存领导层评审的少数几项度量,让 OKR 保存团队本季度选定的改进,让 CSF 和 KPI 描述一项实践的运行健康状况。把这种安排写进指标登记册,使每个数字有唯一的定义和唯一的负责人。
用好 OKR
6. 把目标写成成果,把关键结果写成证据。像"用户无需追着我们就能解决问题"这样的目标是成果。像"得到有用的首次更新的时间中位数从[当前值]降至[目标值]"这样的关键结果是证据。读起来像任务的关键结果("上线新门户")是活动,而不是结果。如果你说不出用户那里会有什么变化,这个关键结果就没写完。
7. 把 OKR 保持在团队和服务层面。为个人设定它们,往往会把它们变成任务清单和绩效考核的输入,并招致古德哈特定律所预言的操纵。让团队公开地撰写自己的关键结果,并让团队互相看到。避免每一层都必须复述上一层的层层分解。
8. 把得分当作交谈,而不是评分。把满分当作目标的团队,会写出怯懦的关键结果。得分集中在顶部,说明在放水;集中在底部,说明目标是幻想。每季度评审分布,并问团队从每次未达成中学到了什么。
用好计分卡、CSF 和 KPI
9. 先定义 CSF,再定义 KPI。关键成功因素是对必须成立的事项的陈述,例如"用户能找到并使用合适的自助文章"。然后由 KPI 显示它是否成立。从 KPI 开始,会诱使你去数容易数的东西。对每个 CSF,问:"如果它不再成立,我们多快能注意到,又是从什么上看出来的?"答案就是 KPI。
10. 用计分卡的视角防止片面的视图。四个经典视角是财务、客户、内部流程以及学习与成长。服务组织常常给它们改名,例如成本、用户体验、运营健康和能力。重要的是每个视角至少有一项有当前值的度量,并且一个视角的下降要与其他视角放在一起读(见主题 6.5,价值实现与业务成果)。
11. 用一张简单的地图把战略与度量联系起来。战略地图画出从能力到流程、到客户、再到财务结果的箭头。它适合用来交谈,用作计算器则很糟。把它画出来,争论箭头,然后挑几项度量。不要试图让图表在数量上精确。
12. 按日历评审框架。设定一次季度评审,团队对每个目标、关键结果和 KPI 问:它是否仍然重要,是否仍能促使人们采取正确的行动。让不再有用的退役,并记录理由。比目标活得更久的指标会变成虚荣指标。
操纵途径与护栏
| 指标 | 被操纵的方式 | 配套的护栏指标或实践 |
|---|---|---|
| 目标可追溯性 | 在指标已经存在之后才补写目标和问题,使记录看上去完整;用含糊的目标为任何指标辩护 | 每季度抽查五个条目,问这个问题是否本可以导致另一个指标;检查受众和决定是否已写明 |
| 关键结果得分分布 | 写容易的关键结果,使得分聚集在 1.0 附近;慷慨地重新评分;不记录原因就舍弃进展不佳的关键结果 | 被舍弃的关键结果数及其理由;将关键结果与上一期间的成果比较;与领导层评审抱负的中位数 |
| 视角覆盖率 | 给某个视角加一个象征性的度量,使其算作已覆盖;选择无法变动的度量 | 检查每个视角的度量在过去一年内是否变过值,并附有书面决定 |
| 指标评审年龄 | 没读指标就记录评审;只改日期 | 要求每次评审附带书面结果(保留、更改、退役),并抽查日志 |
| CSF-KPI 覆盖率 | 指派与 CSF 无关的 KPI 以达到完全覆盖;选择无法暴露失败的 KPI | 对每一对,问什么读数会表明该 CSF 失败;寻找从未变红的 KPI |
健康的读数是:目标随世界变化而变,少数几个关键结果因所述理由而未达成,报告的指标数量在减少或持平而不是增长。如果一切都是绿色,得分聚集在顶部,没人说得出今年退役了哪个指标,这个框架就成了装饰。
权衡:利弊
| 做法 | 优势 | 劣势 |
|---|---|---|
| 目标-问题-指标 | 把每个指标与一个理由联系起来;易于解释;适合团队规模 | 需要有人主持的会议;可能沦为书面练习;对各目标之间的优先级说不了多少 |
| OKR | 让一个季度聚焦于少数几个成果;跨团队可见;适合短规划周期 | 容易把关键结果写成任务;得分可被操纵;个人 OKR 会混入绩效考核 |
| 平衡计分卡 | 给领导层全貌;把战略与运营联系起来 | 维护繁重;视角可能沦为要填的格子;反映变化较慢 |
| CSF 与 KPI | 在 ITIL 实践中熟悉;适合报告运行中服务的情况 | 容易滑向虚荣 KPI;指标不评审就会陈旧 |
| 无框架 | 对很小的团队轻便快捷 | 指标无理由地积累;关于度量什么的争论反复出现 |
| 几个框架并用 | 每个决定都得到合适的工具 | 定义重复;哪个数字权威令人困惑 |
按风险的大小选择框架的分量。一个小型内部服务只需要一个目标、三个问题和写在一页上的几项指标。按合同交付的服务,可能需要把 KPI 定义到服务级别协议的程度(见主题 5.1,SLA、OLA 与 XLA 指标)。
与团队讨论的问题
1. 我们每个已报告的指标服务于什么目标?如果我们停止报告它,谁会注意到? 把指标列在板上,在每个旁边写下目标。目标缺失之处,问谁要求了这个指标、为什么。有些会发现是从早先某个项目继承来的,可以退役。主持人应把没有目标的指标视为正常的发现,而不是失败。
2. 如果我们对自己的服务只能回答三个问题,会是哪三个? 这迫使在指标之前先给问题排序。请每个人写下三个,然后聚类。把聚类与团队目前拥有的仪表板比较。两者之间的缺口通常是这次会议最有用的产出。
3. 我们的关键结果中,哪些描述的是用户的成果,哪些描述的是我们打算做的工作? 大声读出每个关键结果,问如果达成了用户是否会注意到。如果答案是否定的,就把它改写为成果,或移入计划。主持人可以提一句,任务本身没问题,但它们属于待办列表。最后约定本季度改写一个关键结果。
4. 我们的四个计分卡视角在哪里相互矛盾?这告诉了我们什么? 请小组回顾最近一个一个视角改善而另一个恶化的时期,例如成本下降而体验下降。讨论原因,以及有没有人预见到。这培养把度量放在一起阅读的习惯。记录没有度量的视角,决定是增加一个,还是直说它不在范围之内。
5. 对每个关键成功因素,什么读数会告诉我们它正在失败? 挑两个 CSF,说出 KPI,然后问什么值会引发一次交谈。如果团队说不出,说明这个 KPI 没有做好它的工作。寻找从未变过颜色的 KPI,这通常表明阈值设得太松。主持人应追问该 KPI 的操纵途径会是什么。
6. 哪个框架应当拥有哪个决定?我们目前在哪里把同一个数字定义了两遍? 追踪一项指标,例如事件解决时间,看它出现在哪些报告里。比较定义。时钟或排除项的差异很常见,常常解释了团队之间的争论。约定一个负责人和一个定义,并记入登记册。
四种视角
产品与交付团队
交付团队接触框架,主要是 OKR,运气好的话还有 GQM。当团队撰写与用户需求相联的、自己的目标和关键结果,并把工作度量与领导层看到的度量分开时,收获最大。团队应当警惕奖励产出的关键结果,例如故事点或发布次数,因为它们招致框架本想防止的行为(见主题 1.3,结果优先于产出:选择衡量什么)。
服务与运维团队
运维团队接触框架,主要是 ITIL 实践中的 CSF 和 KPI,以及与客户约定的服务级别目标。他们的收益来自:在选择 KPI 之前先用平实的语言定义 CSF,为时间度量报告百分位数,并让服务级别指标和目标等可靠性度量紧挨着用户的体验(见主题 5.2,SLI、SLO 与错误预算)。他们还应抵制保留多年前设定、已不再与服务的使用方式相关的 KPI 的诱惑。
领导层与治理
领导层选择框架,通常是通过要求一份计分卡或 OKR,而他们如何处理数字,决定框架的行为。惩罚未达成关键结果的领导,教会团队写容易的。问团队学到了什么的领导,教会他们写诚实的。治理机构应当期望看到指标登记册、少量报告的度量,以及对框架本身是否有效的定期评审(见主题 11.4,指标体系的成熟度模型)。
客户与用户
客户和用户很少看到框架,只看到它的效果。设计良好的框架表现为他们所要求的方面服务在改进,并对未改进之处如实报告。设计糟糕的框架表现为与体验不符的绿色报告。在每个目标中纳入用户视角,并让用户反馈与运维数字一起放在计分卡的客户视角中(见主题 6.2,体验级别协议)。
实践:一个敏捷 ITIL 示例
一家中型在线零售商运营着一个客户支持平台和一个自助门户,有几个产品团队和一个小型服务运营组。所有数字都是示意数字。
领导层要求一份平衡计分卡,另外还要求季度 OKR。一个季度之内,团队就有了 31 项已报告的度量,没人说得清其中一半为什么存在。服务负责人用 GQM 针对一个目标开了半天会:"从客户的视角,改进无法完成支付的客户所得帮助的清晰度。"
会议产生了四个问题。客户能找到合适的帮助文章吗?读完之后他们还需要联系支持吗?当他们联系支持时,一个支付问题要多久才能解决?他们觉得答案清晰吗?在 31 项度量中,有九项对应这些问题。还需要三项新的:文章搜索成功率、查看文章后的联系率,以及解决后的一道题调查。其余 22 项在负责人同意下标记为退役。
本季度的 OKR 写成了成果。目标是"客户无需追着我们就能解决支付问题"。三个关键结果是解决时间的中位数和第 90 百分位数、查看文章后的联系率,以及关于清晰度的调查结果。计分卡让客户视角指向同样的度量,所以只有一个定义,而不是两个。
季度中途出现了操纵风险。查看文章后的联系率急剧下降,看上去像是成功。一位评审者抽样了 20 次会话,发现一次改版把"联系我们"链接移深了三屏。到达支持的人变少了,调查显示清晰度得分更低。团队加入了搜索放弃率和调查评论作为护栏,并恢复了该链接。
季度结束时,关键结果的得分是 0.6、0.8 和 0.5,团队如实呈现。领导层问团队学到了什么,而不是为什么分数不更高。记录在决定日志中的决定是:该目标保留到第二个季度,用首次访问即解决问题的客户占比取代联系率,并再退役六项计分卡度量。
行业视角
初创企业。初创企业通常需要一个目标、三个问题和寥寥几项指标,放在一页纸上。OKR 很常见,当由将要做这项工作的团队来写时效果很好。在投资人或客户提出要求之前,抵制增加计分卡。
小型企业。资源紧张,所以选一个框架,轻量地使用。为企业承担不起出错的两三件事写下 CSF 和 KPI,往往就足够了。偏重来自客户的直接反馈,而不是精细的评分。
大型企业。几个框架通常并存,这使定义的归属成为主要挑战。保留一份登记册,指定哪个框架保存哪个数字,并每年对整个安排评审一次。当心那些迫使每个团队用自己的话复述公司目标的层层分解。
政府与公共部门。强制性报告和合同约定的服务级别相当于固定的 KPI。把它们当作既定事实,并用 GQM 或 OKR 来做围绕它们的改进工作。公共问责提高了误导性数字的风险,因此要公布定义,并对变更保持公开(见主题 8.5,受监管与政府报告)。
商业论证:动机、投资回报与总拥有成本
框架的成本主要是时间:设计度量的一场有人主持的会议,简短的季度评审,以及登记册的维护。OKR 或计分卡的软件是有的,但小规模时一份文档或电子表格往往就够了。更大的成本是领导层的注意力,因为领导层不使用的框架,会变成为报告而报告。
回报来自更少、更好的度量。能说出每个数字为什么存在的团队,花在制作没人读的报告上的时间更少,为定义争论得更少,也更早注意到某项度量已不再为决定提供依据。与其引用数字,不如测量你自己的基线:采用框架前后报告的指标数、有记录目标的占比,以及准备周期性报告所花的时间。关于投资回报的更完整论述见别处(见主题 7.7,投资回报与商业论证)。
反模式与陷阱
- 先有指标,后有目标。从你已有的数据出发,得到的是一块只含容易计数之物的仪表板。先写目标和问题,再看什么数据合适。
- 把 OKR 当任务清单。写出活动的关键结果,会使每个季度看上去都很忙,却对成果毫无说明。把每个改写成用户会注意到的证据。
- 把 OKR 和计分卡当作个人目标。它们招致操纵,也不利于人与人互相帮助。保持在团队和服务层面。
- 计分卡有空的或象征性的视角。每个格子都填点东西,不等于看到了全貌。要求每个视角都有当前值和一个决定。
- 永不改变的 KPI。如果一个指标多年来一直是绿色,它的阈值多半有问题,或者它度量的是不可能失败的东西。问什么读数会表明有问题,然后重设。
- 框架叠加而无归属。三个框架用三种方式定义同一项度量,会造成争论。指定一个负责人和一个定义。
- 奖励得分。如果满分的 OKR 能赢得表扬或加薪,团队就会写容易的关键结果。奖励诚实的学习和好的问题。
- 框架成了仪式。一天的工作坊产出一张覆膜海报,改变不了任何东西。把产出保留在登记册中,并按日历评审。
成熟度模型
| 维度 | 1 起步 | 2 发展 | 3 标准化 | 4 管理 | 5 协同 |
|---|---|---|---|---|---|
| 目标与问题 | 因数据存在而选指标 | 部分团队先写目标再选指标 | 共同的目标和问题格式;每个已报告的指标都追溯到其中之一 | 评审可追溯性,缺口促成有资助的工作 | 目标与客户和供应商共同撰写,并随条件变化修订 |
| 框架的使用 | 临时的;没有明确的框架 | 各团队采用不同框架,词汇各异 | 书面安排说明哪个框架拥有哪个决定 | 评审框架的成效,舍弃不用的部分 | 框架在团队和供应商之间对齐,使用同一套定义 |
| 指标与评分 | KPI 设定后从不评审 | 部分 KPI 有负责人和阈值 | KPI 和关键结果有负责人、定义和护栏 | 得分和指标有趋势,每季度评审是否被操纵 | 指标被例行地退役和更换,变更与成果相联 |
| 在决定中的使用 | 报告产出后被无视 | 出问题时领导层才要数字 | 评审记录受数字影响的决定 | 学习性问题成为标准;未达成的目标被无责地讨论 | 跨团队的改进规划使用同样的共享目标和度量 |
检查清单
- 每个已报告的指标都能追溯到书面的目标、问题和具名的受众。
- 指标登记册记录哪个框架拥有每个指标,以及其唯一的定义。
- 目标按目的、对象和视角三部分来写。
- 每个关键结果描述的是有人会注意到的成果,而不是任务。
- OKR、计分卡度量和 KPI 属于团队或服务,而不是个人。
- 每个关键成功因素至少有一个当前的 KPI,以及一个会显示失败的明确读数。
- 每个计分卡视角都有一项有当前值的度量。
- 每个指标都有具名的操纵途径和护栏。
- 季度评审会问每个目标、关键结果和 KPI 是否仍然重要。
- 过去一年中至少有一个指标或指示被退役或重新设计,并记录了理由。
AI 提示词
把目标转化为问题和候选指标。
我们团队是[团队名称],为[受众]运营[服务或交付工作的类型]。我们的目标是:
[按目的、对象和视角表述的目标]。请用目标-问题-指标方法,提出三到五个能显示我们
是否达成该目标的问题。对每个问题,建议我们可以定义的候选指标、所需数据来源的
种类、可能的操纵途径和一个护栏。不要编造基准值或统计数据。列出你的假设,以及
你无法从我提供的信息中确定的内容。
评审 OKR 草稿。
这是我们[周期]的目标与关键结果草稿:[粘贴 OKR]。我们的团队是[团队名称],用户是
[受众]。请评审每个关键结果,告诉我它描述的是成果还是活动,是否可能在不帮到
用户的情况下达成,以及什么护栏能显示这一点。需要时建议改写,凡是我们必须自己
提供的数字,用[占位符]表示。不要编造目标或基准值。列出你的假设以及我应当回答的
问题。
把关键成功因素映射到 KPI。
对于我们组织中服务于[受众]的 ITIL 实践[实践名称],这是我们起草的关键成功因素:
[CSF 清单]。请为每个 CSF 提出可从[数据来源]收集的 KPI。对每个 KPI,如果它是
时间度量,说明时钟从哪里开始和停止,什么读数会显示该因素正在失败,以及它可能
如何被操纵。不要给出基准值或合规声明。列出你的假设。
审计计分卡的平衡性。
我们的计分卡有这些度量,按视角分组:[按视角粘贴度量]。我们是[组织类型]。请找出
单薄的视角、看似互相重复的度量,以及可能以掩盖另一视角中问题的方式变动的度量。
建议护栏和应退役的度量。不要编造数字或来源。列出你的假设,以及你无法从我提供的
数据中判断的内容。
AI 技能
- 敏捷 ITIL 指标技能:用于在把指标放入某个框架之前,查找哪个主题拥有它及其配套的护栏。
- 敏捷 ITIL 指标维护者技能:用于检查基于框架的指标条目是否带有定义、操纵途径和护栏。
关键要点
- 框架决定哪些指标配得上一席之地,通行的规则是从目标和问题出发,然后再选指标。
- 目标-问题-指标适合为一个团队设计度量,OKR 适合聚焦一个季度,计分卡适合向领导层展示全貌,CSF 与 KPI 适合运营一项 ITIL 实践。
- 使用能奏效的最轻量框架,并说明由哪一个拥有哪个数字。
- 每个框架都可能被操纵,所以为每个指标配一个护栏,并按日历评审这个集合。
- 把框架保持在团队和服务层面,绝不当作个人目标。
- 让不再为决定提供依据的目标、关键结果和指标退役。
参考文献与延伸阅读
- Basili, V. R., Caldiera, G., and Rombach, H. D., "The Goal Question Metric Approach," in Encyclopedia of Software Engineering, Wiley, 1994.
- Kaplan, R. S., and Norton, D. P., "The Balanced Scorecard: Measures That Drive Performance," Harvard Business Review, January-February 1992.
- Kaplan, R. S., and Norton, D. P., The Balanced Scorecard: Translating Strategy into Action, Harvard Business School Press, 1996.
- Doerr, J., Measure What Matters: How Google, Bono, and the Gates Foundation Rock the World with OKRs, Portfolio, 2018.
- Grove, A. S., High Output Management, Random House, 1983.
- Rockart, J. F., "Chief Executives Define Their Own Data Needs," Harvard Business Review, March-April 1979.
- Forsgren, N., Storey, M.-A., Maddila, C., Zimmermann, T., Houck, B., and Butler, J., "The SPACE of Developer Productivity," ACM Queue, 19(1), 2021.
- Beyer, B., Jones, C., Petoff, J., and Murphy, N. R. (eds.), Site Reliability Engineering: How Google Runs Production Systems, O'Reilly, 2016.
- Axelos, ITIL Foundation: ITIL 4 Edition, TSO, 2019. Summarized, not reproduced.
- Wikipedia, Victor Basili.
- Wikipedia, OKR.
- Wikipedia, Balanced scorecard.
- Wikipedia, Critical success factor.
- Wikipedia, Key performance indicator.
- Wikipedia, ITIL.
- Wikipedia, Vanity metric.
- Wikipedia, Strategy map.