两名审核员、同一位客户，却作出相反决定。在造成损失前找出差距。

一位分析师批准了该客户。另一位针对同一案件，要求提供更多证据。三分之一的人表示该帐户应该被拒绝。

您可能遇到训练问题。您还可能有不明确的政策、不完整的案例证据或隐藏决策所依赖细节的屏幕。

添加另一个审核员本身并不能解决这些问题。首先找出为什么理性的人会得出不同的结论。

在比较答案之前先冻结问题

选择您想要检查的决定。分析师是否正在解决名称匹配问题、接受地址证据或建议对交易采取行动？避免将不相关的复习任务合并到一项练习中。

为参与者提供相同的证据快照、相同的政策版本和相同的问题。如果一位分析师可以看到后来的文件，而另一位分析师则不能，则该练习是在比较信息获取情况而不是判断。

在授权的环境中使用允许的历史或合成案例材料。培训审核不应改变实际客户的状态、发送消息或触发付款限制。

选择揭示问题的案例

包括例行审批、例行不利决策、未解决的案例以及接近保单边界的示例。不要只选择您的团队已经认识的著名欺诈案例。

标记您如何选择样本。故意设置困难的集合对于发现分歧很有用，但它无法确定整个操作的错误率。

确保证据反映了分析师实际收到的信息。完美的训练文件可以隐藏由于缺少链接、混乱的时间戳或生产中不良的案例组织而引起的问题。

独立询问决定及其理由

在与同事讨论案例之前，让每位分析师记录决定、所依赖的证据、适用的政策以及仍然缺少的任何内容。

独立的第一答案减少了每个人都遵循最高层声音的机会。解释与所选结果一样有价值。两个人可以出于完全不同的原因选择审核，但只有其中一个符合政策。

一个说明性的练习可能包括公司名称匹配，一位分析师使用注册号不匹配来清除该字段，而另一位分析师则忽略该字段并升级。结果差异表明存在特定的证据使用问题。 “更加小心”并不是一个有用的解决办法。

在分配培训之前先对原因进行分类

将分歧分为实际类别：

• 证据缺失或仅对某些审阅者可见。

• 政策不明确、矛盾或对此案保持沉默。

• 明确的政策应用不正确。

• 使相关细节难以使用的工具或界面。

• 需要明确的升级负责人的判断。

不要重写策略以自动匹配最常见的答案。大多数人可能是错的。让负责人解决预期的方法并解释支持它的证据。

对于真正不确定的情况，商定的升级可能是正确的结果。强制采用二元答案可能会产生纸面上的一致性，同时隐藏不确定性。

衡量一致性而不称之为准确性

协议告诉您审阅者是否对测试的案例得出了相同的结果。它并不能确定他们是否正确。

团队可以持续清除它无法识别的模式。它也可能不同意，因为有人发现了相关证据。将演习与已确认的下游结果（如果有）进行比较，以区分不确定的情况。

我们关于决策质量的指南涵盖了“结果证据”及其完整性。而“校准”（Calibration）的目的则有所不同：它旨在发现人们在解读现有证据和政策时所存在的差异。

应按任务类型和差异成因来追踪分歧，而非仅仅将其汇总为一个综合评分。同时记录样本量、样本构成以及未达成共识的案例，以确保评估结果具有可解读性。

进行一项可再次评估的改进措施。

选择一项针对具体成因的改进措施。例如：提供更清晰的政策示例、增设必要的证据字段、调整界面设计，或针对反复出现的错误开展专项培训。

使用一组全新的、可比的案例来验证改进措施是否有效。切勿简单地重复使用那些大家早已熟记答案的旧案例。

记录下已达成共识的解读方式、生效日期以及政策负责人。如果校准过程揭示了现行管控机制中存在重大缺陷，请通过既定的治理流程评估其潜在影响。切勿在未作说明的情况下擅自修改过往的决策记录。

Toden 如何为您提供帮助

Toden 的案例管理工具支持记录调查过程、任务分配及最终处理结果。这些记录可为回顾决策形成过程提供依据。

本文介绍的是一项运营校准实践，并未声称 Toden 提供内置盲审模块、自动分析师评分，或独立的质量保证认证。

您已经在使用了 Toden 吗？不妨挑选一项重复性的审核任务，测试一下两位授权分析师能否仅凭案例记录，还原出相同的证据与政策解读。如果无法做到，请联系我们探讨缺失的背景信息，切勿在未解决这些问题前盲目增加审核环节。