变更赋能指标
变更赋能指标显示你的组织是否让有益的变更安全而迅速地流动,所以要度量变更如何分类、等待决定多久,以及这一决定有多少由流水线自动作出,并把每项速度度量与一幅风险图景配对。
概述与动因
每项服务都在变化。团队增加功能、给库打补丁、轮换证书、调整数据库规模,并退役旧的组件。在 ITIL 4 框架中,管理这一切的实践被称为变更赋能,其既定的目的,是通过确保风险得到适当评估、变更获得授权、变更日程得到管理,来最大化成功的服务和产品变更的数量。早期的 ITIL 版本把这项实践称为变更管理,许多组织仍在使用这个名称。新名称表明了侧重点的变化:这项实践的存在是为了赋能良好的变更,而不是阻拦它。
在 ITIL 4 中,变更是添加、修改或移除任何可能对服务产生直接或间接影响的东西。这比一次代码部署的范围更广。它涵盖配置修改、基础设施更新、访问变更、供应商的行动,以及运维人员所依赖的文档。敏捷团队通常把变更看作一个发布出去的拉取请求。服务运维团队把它看作日程上的一个条目。两种看法都有效,而本主题的指标,在从两侧描述同一事件时效果最好。
ITIL 4 描述了三种类型的变更,本主题的指标依赖于它们。请查阅框架所有者现行出版物中的确切措辞;本主题总结的是截至 2026 年 10 月被广泛记载的模式。
- 标准变更风险低且被充分理解。它遵循文档化的程序并被预先授权,因此无需逐案批准。
- 常规变更在继续之前需要评估和授权。评估的深度随风险和影响而变化。
- 紧急变更必须紧急进行,往往是为了恢复服务或堵住严重的漏洞。它遵循加速的路径,事后再作更充分的评审。
下文还会反复出现其他术语。变更授权人是对给定类型的变更拥有批准权的个人或小组。变更咨询委员会(CAB)是评审拟议变更并提出建议或作出决定的小组。批准前置时间是变更等待授权决定的时间。百分位数是指在所有观测值中,有规定比例落在其下方的值,所以第 85 百分位数是 85% 的变更都优于的那个数。
为什么要度量这一切?关于变更控制最有力的公开证据,来自 DevOps 研究与评估(DORA)的研究项目。它的指南报告称,繁重的外部批准,比如 CAB 或高级经理的签字,与较差的软件交付表现相关,而且没有发现证据表明更正式的外部评审会降低失败变更的占比。它转而建议同行评审、自动化测试和小变更,并为任何中央委员会赋予战略性角色。这些是关于调查数据中关联的陈述,不是定律,而且 DORA 的页面没有为该主张给出效应量,所以应将其视为查看你自己数据的有力理由,而不是对任何一项控制的裁决。《敏捷 ITIL 指南》中的变更赋能材料总结了同样的研究。
敏捷与 ITIL 的视角在控制位于何处这一问题上汇合。在交付流水线中,大部分评估可以持续进行:评审者批准代码,自动化测试检查行为,部署工具写下记录。当评审被记录、且作者不能批准自己的工作时,这满足了职责分离的意图。指标告诉你这是否真的在发生,还是流水线只是一条快速道路,而大多数变更仍然离开它,去队列中等待。
本主题涵盖变更的流动和控制一面:数量、类型构成、等待时间和自动化。它不涵盖变更是否成功。变更失败率、紧急占比、回滚和热修复的度量,属于主题 4.4(变更失败与返工),而 DORA 的吞吐和不稳定度量见主题 2.8(DORA 指标)。部署和发布频率见主题 4.5(发布与部署指标)。糟糕变更的事件一面,见主题 3.3(事件响应与解决时间)和主题 3.4(重大事件指标)。
变更指标很快就会招来古德哈特定律:对批准时间设目标,会招致快速而空洞的批准;对标准变更占比设目标,会招致把有风险的工作重新分类为例行工作(见主题 1.2,古德哈特定律与指标心理学)。
关键原则
- 让控制与风险相称。目标是相称的控制:低风险变更走快速的、预先授权的路径,高风险变更得到真正的审视。对一切都用同一个流程,对大多数变更太慢,对危险的变更又太浅。
- 度量等待,而不只是工作。批准前置时间往往主导一个完成的变更在到达生产环境之前所花的时间。除非有人记录了批准何时被请求、何时被授予,否则它是不可见的。
- 在统计其他任何东西之前,先按类型统计。标准、常规和紧急变更在数量、速度和风险上差别巨大。跨这三者的单一平均值,隐藏了每一个有用的信号。
- 偏好自动化、有记录的证据,而不是会议。同行评审、通过的测试和流水线检查产生记录,而不占用日历上的时段。度量流水线捕获了多少批准决定。
- 描述服务或团队,绝不描述个人。批准人和请求人在一个系统内工作。按批准或拒绝的数量给个人排名,会教会人们批准一切或什么也不批准。
- 把速度与安全配对。只有失败图景保持稳定,更快的批准才是好消息。把这些指标与主题 4.4(变更失败与返工)并排阅读。
- 写下分类规则。一个变更是标准、常规还是紧急,是必须可复现的判断。记录标准,并每季度评审一份样本。
指标定义
下表列出你的团队应当写下的时钟和排除项。数据来自变更或工单工具、版本控制和流水线事件,以及批准记录(见主题 1.5,数据来源与埋点)。
| 指标 | 定义 | 公式 | 单位 | 数据来源 | ITIL 实践 | 敏捷对应 | 频率 |
|---|---|---|---|---|---|---|---|
| 按类型的变更数量 | 完成的变更数量,按标准、常规和紧急划分 | 该期间达到已实施状态的变更记录数,按批准时的类型分组;已取消和已撤回的变更被排除并单独报告;按服务报告,不按人 | 每周或每月的变更数,按类型 | ITSM 工具中的变更记录,与流水线部署事件关联 | 变更赋能 | 完成的工作项的吞吐;每个增量的发布内容 | 每周,每月评审 |
| 标准变更占比 | 走预先授权路径的已完成变更占比 | 该期间完成的标准变更数 / 该期间完成的全部变更数;事后被重新分类的变更按其最终类型计数,并记录重新分类 | 百分比 | 带类型和重新分类历史的变更记录 | 变更赋能 | 团队工作协议和完成定义所涵盖的例行工作 | 每月 |
| 批准前置时间 | 变更等待授权决定的时间 | 时钟在请求作为可供评估而提交时启动,在授权决定被记录时停止;等待请求人提供信息的时间被排除并单独显示;报告该期间常规变更的中位数和第 85 百分位数;没有批准步骤的标准变更被排除 | 小时或工作日 | 变更记录或流水线批准事件上的时间戳 | 变更赋能 | 工作流中的等待时间;在评审列中的时间 | 每周,每月评审 |
| 自动批准占比 | 由流水线控制或预先授权的政策作出并记录的授权决定占比 | 其批准由有记录的自动检查、或依据书面政策的有记录的同行评审授予的变更数 / 该期间完成的全部变更数;由委员会或经理手工签字的,算作非自动 | 百分比 | 流水线日志、代码评审记录和变更记录 | 变更赋能;部署管理 | 自动化质量门禁;作为完成定义一部分的同行评审 | 每月 |
| 批准队列年龄 | 待处理请求此刻已经等了多久 | 当前正在等待决定的每个变更的年龄,从提交到快照的时刻;报告最老的项目和打开队列的第 85 百分位数;已完成的批准被排除 | 小时或工作日 | 带有打开批准状态的变更记录 | 变更赋能 | 工作项年龄;老化的在制品 | 每日快照,每周评审 |
| 变更记录完整性 | 其记录能回答谁、什么、为什么、何时以及哪项服务的已完成变更占比 | 所有必填字段都已填写、并与受影响的服务或配置项关联的变更数 / 该期间完成的全部变更数;必填字段列在定义中;在变更实施之后才创建的记录被标出 | 百分比 | 变更记录、版本控制链接、配置数据 | 变更赋能;服务配置管理 | 从提交到工单再到部署的可追溯性 | 每月 |
批准前置时间回顾的是已经结束等待的变更,可能隐藏一堆卡住的请求。队列年龄看的是今天正在等待的东西,是更早的预警。标准变更占比不是要最大化的分数:通过成熟流水线修改配置的团队会有很高的占比,而在遗留核心系统上的团队,合理地占比较低。
建议
建立基础
1. 在度量其他任何东西之前,先按类型统计变更。建立一个已完成变更的统一视图,按标准、常规和紧急划分,按服务和月份。许多组织在这一刻发现,没人能就总数达成一致,因为工单、流水线部署和非正式的修复是分别计数的。核对这些来源,是该项目的第一个成果(见主题 1.5,数据来源与埋点)。
2. 写下分类规则并抽样检查。说明什么使一个变更成为标准变更:文档化的程序、已知的风险和业绩记录。说明什么把变更推向常规或紧急。每季度评审约二十个变更的随机样本,问每一个是否按规则所说的方式分类。错误分类,是本主题中其他每个数字面临的主要威胁。
3. 以书面形式定义批准时钟。说明时钟在请求作为就绪提交时启动,在决定被记录时停止,并列出排除项,比如等待请求人回答问题。没有这些,一个团队从工单创建时开始度量,另一个团队从委员会会议开始,这些数字甚至无法随时间比较。
缩短等待
4. 把批准前置时间报告为分布。平均值隐藏了重要的模式,也就是少数几个变更等待了很长很长的时间。显示中位数和第 85 百分位数,以及最慢的几个案例,按变更的名称而不是人的名字(见主题 1.6,服务指标的统计素养)。如果第 85 百分位数是中位数的许多倍,原因通常是会议周期或单个负荷过重的批准人,修复是结构性的。
5. 观察队列,而不只是历史。每周在评审流动度量的同一场合评审批准队列的年龄。最老的等待项,是委员会负荷过重、假期使签字停滞,或请求人悄悄停止跟进的最佳早期预警。队列视图也符合观察老化工作的习惯(见主题 2.1,流动度量)。
6. 把等待信息与等待决定分开。当请求被退回请求人补充细节时,停止批准时钟,并启动另一个。批准人为请求人造成的延迟被责备,请求人为队列里的延迟被责备。两个时钟给双方一幅准确的图景和具体的改进,比如更好的请求模板。
把控制移入流水线
7. 把可重复的低风险变更类型转化为标准变更。在你的数量视图中挑出最常见的常规变更,比如例行的库更新或扩缩容动作。写下它的程序和检查,与变更授权人约定风险,并预先授权。然后同时观察标准变更占比和常规变更的批准前置时间:占比应当上升,队列应当缩短,而失败没有相应上升(见主题 4.4,变更失败与返工)。
8. 在工作发生的地方记录批准。在代码评审工具中捕获同行评审,并让流水线自动把评审、测试结果和部署关联到变更记录。这样,记录就是工作的副产品,而不是一项单独的任务。度量自动批准占比,并检查一份样本,确认所记录的评审是实质性的,不是橡皮图章(见主题 2.7,拉取请求与代码评审指标)。
9. 把流水线当作编码政策的地方。像"没有工单就不能直接访问生产环境"、"测试必须通过"和"作者不能批准自己的变更"这样的规则,可以由工具强制执行,其配置在基础设施即代码的实践下作为代码保存。当政策是代码时,你可以向审计员展示规则及其历史,而不是一份会议纪要。度量有多少变更绕过了流水线,因为每次绕过都是控制中的一个漏洞。
保持控制诚实
10. 为紧急变更保留一条快速通道,并评审它是如何使用的。紧急变更需要速度,所以不要用常规队列拖慢它们。事后要评审每一个,并留意数量向上漂移,因为比常规路径更容易的紧急路径会变成默认(这方面的度量见主题 4.4,变更失败与返工)。把紧急数量和常规数量报告在同一个视图中。
11. 按计划审计记录的完整性。完整的记录在事件期间有帮助,那时响应者会问最近改了什么(见主题 3.3,事件响应与解决时间)。度量完整性,评审一份样本,并把缺口当作表单或集成中的缺陷,而不是请求人的过失。事后凭记忆拼凑出来的审计轨迹,是薄弱的证据。
12. 至少每年评审一次变更授权模型。决定每种类型和风险级别的批准权归谁,并让批准所见一切的委员会退役。把中央委员会转向战略性角色:跨团队协调、解决日程冲突,以及就上市时间与风险之间的取舍作出决定。把决定和证据记录在指标登记册中(见主题 1.4,指标治理与归属)。
操纵途径与护栏
| 指标 | 被操纵的方式 | 配套的护栏指标或实践 |
|---|---|---|
| 按类型的变更数量 | 把一个变更拆成许多小记录以显得忙碌,把许多合成一个以显得平静,或让非正式的变更不入账 | 每月对照流水线部署事件核对计数;跟踪没有匹配变更记录的部署占比 |
| 标准变更占比 | 为达到目标而把有风险的工作重新分类为标准,或写下涵盖一切的宽泛标准程序 | 对分类的季度样本评审;按类型的变更失败率(见主题 4.4,变更失败与返工);重新分类的日志 |
| 批准前置时间 | 晚启动时钟、早停止时钟、为不需要问的问题暂停时钟,或不读就批准 | 中位数旁边的第 85 百分位数;对批准实质的抽样评审;按批准人群体、绝不按个人的变更失败率 |
| 自动批准占比 | 增加总是通过的自动检查,或把没有评论的同行评审算作保证 | 对自动批准和同行批准的抽样评审;自动批准变更的逃逸缺陷和失败率;绕过计数 |
| 批准队列年龄 | 关闭或撤回旧请求使队列显得很短,或把它们移到带新时间戳的新请求 | 撤回和重新提交的请求计数;从首次提交起度量的请求年龄 |
| 变更记录完整性 | 用占位文本填写必填字段,或为满足报告而在变更之后创建记录 | 标出在实施之后创建的记录;对自由文本做抽样质量评审;链接到提交的比率 |
健康的读数显示:类型构成缓慢地向标准变更转移,而失败图景稳定;中位数批准时间接近第 85 百分位数;队列中没有哪一项比其余的老得多;绕过计数保持接近零。对任何单一数字的突然跳变要保持怀疑。在没有流程变化的情况下,一个月内批准前置时间减半,通常意味着时钟移动了,而不是工作变了。
权衡:利弊
| 做法 | 优点 | 缺点 |
|---|---|---|
| 预先授权的标准变更 | 快速、一致、审计成本低;让变更授权人腾出手来处理有风险的工作 | 需要预先设计;分类可能漂移;宽泛的程序隐藏风险 |
| 在流水线中记录的同行评审 | 由了解代码的人评审;自动产生记录;随数量扩展 | 质量取决于评审文化;小团队可能缺少独立的评审者;一些监管者期望有单独的批准人 |
| 中央变更咨询委员会 | 跨团队的可见性;捕捉日程冲突和共享依赖的风险 | 当用作每个变更的关卡时很慢;鼓励更大批量、更不频繁交付的变更;产生队列 |
| 以批准前置时间为头条指标 | 易于解释;暴露真实的延迟来源 | 易被操纵;可能迫使批准人赶工;对决定的质量只字不提 |
| 以自动批准占比为目标 | 奖励对工具和有记录证据的投入 | 可能奖励薄弱的自动检查;可能排除真正需要人类判断的变更 |
更好的问题很少是"要不要委员会",而通常是"哪些变更需要哪种审视,我们怎么知道?"
与团队讨论的问题
1. 上个月我们做了多少变更?我们所有的来源一致吗? 请每个小组从工单、流水线部署和非正式渠道各自得出自己的计数。比较总数。差距本身就是关于未记录变更的发现。主持人应约定哪个来源是记录系统,以及由谁核对其他来源。
2. 我们的常规变更中,哪些其实是例行的?要怎样才能把它们变成标准变更? 列出最频繁的五个常规变更。对每个,问程序是否有文档,风险是否被理解,团队是否有干净的业绩记录。讨论常会发现一两个明显的候选。捕获使预先授权安全的检查,并指出由谁来批准这个标准程序。
3. 我们的批准时钟在哪里开始、在哪里停止?里面在等什么? 取最近的三个常规变更,从提交追溯到决定。记下每一次交接、会议和信息请求。人们常常惊讶于,有多少等待是几轮提问之间的日历时间。约定一份书面的时钟定义以及排除了什么。
4. 我们信任我们的批准,还是只是收集它们? 抽取一份近期批准的样本并阅读评审。寻找在几秒钟内授予、或没有评论的批准。目标是了解这个流程真正提供了多少保证,而不是找出罪魁。讨论怎样能使评审更实质,又不使它更慢。
5. 我们的变更委员会是干什么用的?如果它不再开会,我们会失去什么? 问委员会决定了哪些别人决定不了的事,又只是确认了哪些。有些委员会在跨团队协调和发现日程冲突上做着有价值的工作。另一些只是复述代码评审中已经作出的决定。约定哪些职能值得保留,哪些可以移入流水线或一个更轻的论坛。
6. 如果我们把批准时间减半,需要看到什么才知道它是安全的? 在变更之前说出安全信号,比如按类型的变更失败率、紧急占比,以及与近期变更关联的事件。约定会触发暂停的阈值。这场交谈把速度目标变成带有停止规则的实验,这是防止优化错误东西的最佳防御。
四种视角
产品与交付团队
交付团队把批准前置时间感受为一个完成的变更与一个运行中的变更之间的闲置时间。他们想按类型看到自己的数字,并看到队列的视图,以便决定何时合批、何时拆分、何时请求一个新的标准变更。他们最好的贡献,是良好的请求模板、小变更,以及从提交到变更记录的清晰链接。
服务与运维团队
运维团队用变更记录回答第一个事件问题:最近改了什么?他们看重完整性、准确的服务链接和可信的日程。他们也承担变更出错的代价,所以对分类规则和紧急变更的评审有正当的兴趣。最好的做法,是与交付团队共同拥有标准变更目录,使预先授权反映运维知识。
领导层与治理
领导层和治理机构需要变更受到控制的保证,也需要知道控制是否在拖慢组织。这些指标两者兼顾:类型构成、等待时间,以及由有记录证据支持的批准占比。要的是趋势和跨服务的分布,绝不是排行榜,并与失败度量并排阅读(见主题 4.4,变更失败与返工)。为把批准移入流水线的自动化出资,通常是比给委员会增加一位评审者更好的投资。
客户与用户
客户很少看到变更流程。他们看到的是新功能到来、修复及时发布,以及发布之后更少的中断。缓慢的批准延迟了他们所要求的修复,薄弱的批准则冒着他们所害怕的中断的风险。在服务有计划维护窗口之处,用平实的语言发布变更日历。
实践:一个敏捷 ITIL 示例
一家虚构的区域保险公司运营着一个客户门户,有八个交付团队和一个每周开两次会的 CAB。以下所有数字都是示意数字。
服务运维负责人建立了第一个完整的变更视图。该月,门户按工单显示约 420 个已完成变更,按流水线显示 610 次生产部署,差距原来是没有工单就做出的变更。在 420 个有工单的变更中,18% 是标准变更,76% 是常规变更,6% 是紧急变更(示意数字)。常规变更的批准前置时间中位数是 2 个工作日,第 85 百分位数是 7 个工作日(示意数字)。队列中最老的请求已等了 12 个工作日。
当团队查看这个长长的等待时,他们发现两个原因。许多请求即使是例行的,也要等到下一次委员会会议,而另一些则因信息缺失被退回请求人好几次。团队把两个时钟分开,发现第 85 百分位数的等待中约有一半是等待请求人的时间。他们先修复了请求模板。然后他们挑出三个最常见的常规变更:带通过测试的依赖更新、功能开关工具中的配置切换,以及应用服务器的扩缩容。他们写下程序,与变更授权人约定风险,并把它们转化为标准变更,批准记录在流水线中。
两个月后,标准变更占比升到 41%(示意数字),常规变更的批准前置时间第 85 百分位数降到 4 个工作日(示意数字),而按类型的变更失败率保持持平,如配套度量所报告的那样(见主题 4.4,变更失败与返工)。委员会从评审每一个常规变更,转为评审高风险变更和月度日程。
一个操纵风险出现在季度样本中。一个团队把数据库架构迁移归类为标准变更,因为早先关于"配置变更"的程序措辞宽松。样本评审者注意到,这次迁移没有回滚计划。团队收紧了标准变更的定义,增加一条规则:架构变更始终是常规变更,而重新分类的日志成为常设议程项。记录在指标登记册中的决定是:把标准变更占比保留为背景度量,而不是目标。
行业视角
初创企业。初创企业通常正式流程很少,流水线自动化很多。变更发生得很快,却没有记录,所以完整性以及从提交到部署的链接最重要。一页纸的三种类型定义,加上流水线记录的评审,往往就够了。
小型企业。小型企业往往有一两个既写又发布变更的人,所以独立评审很难。为例行工作使用简单的标准变更清单,对任何触及客户数据或金钱的变更要求另一双眼睛,并保留一份平实的变更日志。值得跟踪的度量是按类型的数量和记录的完整性,因为它们成本低,并在事件期间有帮助。
大型企业。大型企业有许多团队、共享平台和风险各异的遗留系统。它们往往有一个 CAB,而指标有助于决定它的哪些任务该保留。主要工作是一致的分类、共享的标准变更目录,以及记录审计证据的流水线。按服务和风险类别汇总,不要按团队排名。
政府与公共部门。公共机构往往面临关于批准、职责分离和记录保留的法律要求,并可能有由采购驱动的发布窗口。指标应当说明哪些控制是强制性的,哪些是本地习惯,因为前者无法移除,后者可以。有记录的同行评审和流水线证据通常可以满足意图,但在依赖它之前,请与相关审计员确认(见主题 8.3,合规与审计指标)。
商业论证:动机、投资回报与总拥有成本
动机通常是变更所花的等待时间。当完成的工作排队等待决定时,价值被延迟,批量增大,每个批次承担更多风险。第二个动机是保证:领导者和审计员想知道变更受到控制,而流水线中有记录的证据,生产成本更低,也比事后重建更可信。第三个是事件响应,因为完整而准确的变更记录缩短了对原因的搜寻。
如果变更工具和流水线已经存储了时间戳和类型,收集成本就很低;如果必须把它们集成起来,则成本适中。根据数据采取行动的成本更高:编写标准变更程序、构建流水线检查,以及培训批准人和请求人。预期大部分工作在第一个季度,之后抽样和评审的成本较低而稳定。
回报表现为每个变更更少的等待时间、更少的会议、准备审计证据的更少工作量,以及事件期间更快的诊断。用你自己的数据估算:用批准等待小时数的减少,乘以受影响的变更数,再乘以你的财务伙伴接受的每延迟一小时的成本。不要从其他组织引入数字。DORA 的研究支持论证的方向,但其页面没有给出成本或回报,任何金额都必须来自你自己的度量。
反模式与陷阱
- 把标准变更占比当作目标。团队会为达到数字而重新分类有风险的工作。把它用作背景,抽样评审分类,并观察按类型的失败率。
- 只度量批准速度。快速的橡皮图章看上去极好,却什么也没交付。把前置时间与对批准实质的抽样评审以及失败图景配对。
- 每次事件之后增加批准。每增加一道新关卡都会拖慢系统,往往还鼓励更大的批量。先看失败为何发生,并在测试、评审或流水线中修复原因。
- 给批准人或请求人排名。按人统计批准或拒绝的数量,会教会人们批准一切或什么也不批准。按服务和变更类型报告。
- 跨变更类型取平均值。单一的平均值把例行和有风险的工作混在一起,把两者都隐藏了。始终按类型拆分,并显示第 85 百分位数。
- 忽视在流程之外做出的变更。绕过隐藏了真实的数量和风险。核对流水线部署与变更记录,并把缺口视为系统缺陷。
- 出于习惯保留委员会。批准所见一切的委员会,增加延迟而不增加保证。每年评审它决定了哪些别人决定不了的事,并重新聚焦它。
- 收集数据却从不作决定。把每项指标与指名的负责人和评审论坛关联起来(见主题 1.4,指标治理与归属)。
成熟度模型
| 维度 | 起步 | 发展 | 标准化 | 管理 | 协同 |
|---|---|---|---|---|---|
| 分类与数量 | 类型是非正式的;没人知道总数 | 部分团队按类型计数,规则各异 | 一份书面的分类,一个记录系统 | 类型构成有趋势,并抽样检查准确性 | 标准变更目录与供应商共享,并随风险证据变化而修订 |
| 批准时钟与队列 | 感受得到批准等待,但没有计时 | 部分团队给请求加时间戳 | 一个时钟的定义,显示中位数和百分位数 | 每周评审队列年龄;延迟驱动获得资助的修复 | 对照失败和客户成果,在团队和供应商之间调整批准流 |
| 批准的自动化 | 批准是一次会议或一封邮件 | 少数流水线记录同行评审 | 有记录的评审和检查是低风险变更的默认 | 跟踪自动占比,附绕过计数和抽样质量检查 | 政策被编码到共享平台控制中,并随风险图景变化而调整 |
| 记录与使用 | 记录单薄,或事后撰写 | 记录存在,但质量不一 | 约定必填字段并关联到服务 | 审计完整性并用于事件评审 | 变更数据为整个组织的事件、问题和审计实践提供输入 |
检查清单
- 三种变更类型及其标准已写下并约定。
- 存在一个按类型的已完成变更的统一视图,并与流水线部署核对。
- 批准时钟有书面的起点、终点和排除项清单。
- 批准前置时间报告为中位数和第 85 百分位数。
- 批准队列年龄可见,并每周评审。
- 至少一个频繁的常规变更已转化为带文档化程序的标准变更。
- 同行评审和测试结果自动关联到变更记录。
- 每季度的样本检查分类和批准质量。
- 度量并评审对流水线的绕过。
- 每项指标在指标登记册中都有指名的负责人、操纵途径和护栏。
- 没有任何报告给个别批准人或请求人排名。
AI 提示词
为三种变更类型起草一份分类指南。
我在[组织类型]工作,我们运行[服务清单]。我们的变更工具是[工具],流水线是[流水线
工具],监管背景是[法规或无]。这是我们十个最频繁的变更:[清单]。请起草一份平实
语言的指南,用于决定每个变更是标准、常规还是紧急变更,说明你所用的标准,并给出
一个边界案例的例子。不要编造基准值,也不要声称任何实践满足审计要求。列出你的假设,
以及在采用这份指南之前我应当回答的问题。
找出批准时间花在哪里。
这是一份变更记录的摘录,含提交、信息请求和决定的时间戳:[粘贴的数据或描述]。我们
的批准流程是[描述]。请按变更类型计算批准前置时间的中位数和第 85 百分位数,把等待
请求人的时间与等待决定的时间分开,并就最长的案例建议三个要问的问题。不要编造数据
中没有的数字,也不要给个人排名。列出你的假设,以及你注意到的任何数据质量问题。
检查指标的操纵风险。
我们报告这些变更赋能指标:[带定义的指标清单]。受众是[团队、领导层或治理机构],
这些指标用于[目的]。请对每项指标,列出它可能在没有真正改善的情况下被夸大、隐藏或
扭曲的方式,并建议一个配对的护栏度量或实践。不要提议目标或基准值。列出你的假设,
以及你认为对[服务名称]最重要的操纵风险。
规划从委员会批准到流水线批准的转变。
我们目前针对[变更类型]的批准路径是[描述],有[数量]位批准人,典型的等待描述为
[描述]。我们的流水线提供[检查、测试、评审工具]。请提出一个分阶段的计划,把低风险
变更转到有记录的、基于流水线的批准,包括我们需要保留的证据、要观察的安全信号,
以及一条停止规则。不要声称该计划满足任何法规或标准。列出你的假设,以及我应当咨询
的人,比如[审计员、安全负责人、变更授权人]。
AI 技能
- 敏捷 ITIL 指标技能:用于查找相关的变更、发布和事件主题,以及应当放在每项变更赋能指标旁边的护栏。
- 敏捷 ITIL 指标维护者技能:用于检查本主题的修订版是否保持其时钟、操纵途径和交叉引用的一致。
关键要点
- 变更赋能指标度量变更的流动和控制:按类型的数量、批准的等待,以及流水线自动记录了多少批准。
- 一切都按变更类型拆分,把等待时间报告为中位数和第 85 百分位数,既观察实时队列,也观察历史。
- 把例行工作转为标准变更,并在流水线中记录评审,是缩短等待最直接的方式,而且必须与失败度量并排阅读。
- 标准变更占比和批准速度很容易被操纵,所以要对分类和批准质量抽样,并让这些数字远离个人记分卡。
- 用这些指标来决定变更委员会是干什么的,并为使较轻的控制变得安全的自动化出资。
参考文献与延伸阅读
- Forsgren, N., Humble, J., and Kim, G., Accelerate: The Science of Lean Software and DevOps, IT Revolution, 2018.
- DORA (Google Cloud), "Streamlining change approval" and "Software delivery performance metrics," DORA capabilities and guides, https://dora.dev/ (read the pages directly and note the date you consulted them).
- AXELOS (now PeopleCert), ITIL Foundation: ITIL 4 Edition, TSO, 2019.
- Goodhart, C. A. E., "Problems of Monetary Management: The U.K. Experience," in Papers in Monetary Economics, Reserve Bank of Australia, 1975.
- Wikipedia, ITIL.
- Wikipedia, Change management (ITSM).
- Wikipedia, Separation of duties.
- Wikipedia, Goodhart's law.
- Wikipedia, Code review.
- Wikipedia, Infrastructure as code.
- Wikipedia, Audit trail.