Dois revisores, um cliente, decisões opostas. Corrija a lacuna antes que lhe custe.

Um analista aprova o cliente. Outro, perante o mesmo caso, pede mais provas. Um terceiro diz que a conta deveria ter sido recusada.

Pode ter um problema de treinamento. Também pode ter uma política ambígua, provas de caso incompletas ou um ecrã que oculta os detalhes dos quais a decisão depende.

Adicionar outro revisor não resolverá estes problemas por si só. Primeiro descubra porque é que pessoas razoáveis ​​estão a chegar a conclusões diferentes.

Congele a pergunta antes de comparar as respostas

Escolha a decisão que pretende examinar. O analista está a resolver uma correspondência de nome, a aceitar provas de endereço ou a recomendar uma ação numa transação? Evite combinar tarefas de revisão não relacionadas num único exercício.

Dê aos participantes o mesmo instantâneo de provas, a mesma versão da política e a mesma questão. Se um analista consegue ver um documento posterior e outro não, o exercício consiste em comparar o acesso à informação e não o julgamento.

Utilize material de caixa histórico ou sintético permitido num ambiente autorizado. Uma revisão de formação não deve alterar o estado de um cliente ativo, enviar uma mensagem ou desencadear uma restrição de pagamento.

Selecione casos que revelem o problema

Inclua aprovações de rotina, decisões adversas de rotina, casos não resolvidos e exemplos perto dos limites da sua apólice. Não selecione apenas casos de fraude famosos que a sua equipa já reconhece.

Rotule como selecionou a amostra. Um conjunto deliberadamente difícil é útil para encontrar divergências, mas não consegue estabelecer a taxa de erro de toda a operação.

Certifique-se de que as provas refletem o que os analistas realmente recebem. Um ficheiro de formação imaculado pode ocultar os problemas causados ​​por ligações perdidas, carimbos de data e hora confusos ou má organização de casos na produção.

Peça uma decisão e o seu motivo de forma independente

Faça com que cada analista registe a decisão, as provas em que se baseia, a política aplicável e tudo o que ainda esteja em falta antes de discutir o caso com os colegas.

As primeiras respostas independentes reduzem a hipótese de todos seguirem a voz mais antiga. A explicação é tão valiosa quanto o resultado selecionado. Duas pessoas podem escolher a revisão por motivos totalmente diferentes, sendo que apenas uma delas corresponde à política.

Um exercício ilustrativo pode incluir uma correspondência de nome de empresa que um analista elimina utilizando uma incompatibilidade de número de registo, enquanto outro ignora este campo e escala. A diferença de resultados sugere um problema específico de utilização da evidência. “Tenha mais cuidado” não é uma solução útil.

Classifique a causa antes de atribuir o treino

Classifique as divergências em categorias práticas:

• Evidências em falta ou visíveis apenas para alguns revisores.

• Política pouco clara, contraditória ou omissa sobre o caso.

• Uma política clara aplicada incorretamente.

• Uma ferramenta ou interface que dificulta a utilização de detalhes relevantes.

• Uma decisão que necessita de um proprietário de escalonamento definido.

Não reescreva a política para corresponder automaticamente à resposta mais comum. A maioria pode estar errada. Peça ao proprietário responsável que resolva a abordagem pretendida e explique as provas que a suportam.

Para casos genuinamente incertos, uma escalada acordada pode ser o resultado correto. Forçar uma resposta binária pode produzir consistência no papel e, ao mesmo tempo, ocultar a incerteza.

Meça a concordância sem lhe chamar precisão

A concordância informa se os revisores alcançaram o mesmo resultado nos casos testados. Não estabelece se estavam certos.

Uma equipa pode eliminar consistentemente um padrão que não reconhece. Também pode discordar porque uma pessoa identificou provas relevantes. Compare o exercício com resultados confirmados a jusante, quando disponíveis, mantendo distintos os casos inconclusivos.

O nosso guia sobre qualidade da decisão abrange a evidência de resultados e a sua integridade. A calibração serve um propósito diferente: encontrar diferenças na forma como as pessoas interpretam as provas e as políticas que já possuem.

Acompanhe a discordância por tarefa e causa, e não apenas como uma pontuação combinada. Registe o tamanho da amostra, a composição e os casos não resolvidos para que o resultado se mantenha interpretável.

Faça uma melhoria que possa avaliar novamente

Escolha uma ação ligada à causa. Este pode ser um exemplo de uma política mais clara, um campo de evidência obrigatório, uma mudança de interface ou uma formação focada num erro repetido.

Utilize um novo conjunto de casos comparáveis para ver se a melhoria ajudou. Não repita simplesmente casos cujas respostas todos decoraram.

Mantenha um registo da interpretação acordada, da data de vigência e do titular da apólice. Quando o exercício revelar uma fraqueza material no controlo em tempo real, avalie o seu impacto potencial através do seu processo normal de governação. Não reescreva silenciosamente decisões anteriores.

Onde Toden pode ajudar

As ferramentas de caso da Toden suportam registos de investigação, atribuições e resultados registados. Estes registos podem fornecer uma base para a revisão de como uma decisão foi tomada.

Este artigo descreve um exercício de calibração operacional. Não reivindica um módulo de revisão cega integrado, uma pontuação automática de analista ou uma certificação independente de garantia de qualidade.

Já usa o Toden? Escolha uma tarefa de revisão recorrente e verifique se dois analistas autorizados conseguem reconstruir a mesma evidência e política a partir do seu registo de caso. Se não puderem, fale connosco sobre o contexto em falta antes de adicionar mais passos de revisão.