A avaliação de efetividade em PLD/FT verifica se os controles do programa funcionam na prática e respondem aos riscos identificados. Para produzir uma conclusão defensável, ela precisa combinar metodologia, testes, amostras justificadas e evidências. O resultado deve mostrar deficiências, suas consequências e o acompanhamento das medidas corretivas.
Um procedimento aprovado demonstra intenção. A avaliação procura saber se ele foi aplicado, se alcançou a população esperada e se produziu a resposta prevista. Essa diferença importa quando a operação cresce, os dados mudam ou uma etapa depende de execução manual.
O que avaliar: desenho e funcionamento dos controles
Comece pelas exposições relevantes e pelos controles destinados a tratá-las. Defina a pergunta de cada teste. Em identificação de clientes, por exemplo, a pergunta pode ser se os registros examinados contêm verificações suficientes e se as exceções seguiram o tratamento previsto.
O teste de desenho verifica se o controle, como concebido, responde ao risco. O teste de funcionamento procura evidências da sua execução. Um fluxo pode ter aprovações formalmente corretas e, ainda assim, não abranger um canal importante ou uma população que exige tratamento diferenciado.
Os sinais de maturidade do programa de PLD/FT ajudam a organizar a discussão, mas não substituem os testes. Treinamentos realizados, políticas revisadas e reuniões ocorridas precisam ser relacionados à aplicação dos controles e ao risco que se pretende tratar.
Como planejar os testes de efetividade
Construa uma matriz de testes com objetivo, população, período, responsável, critério de aprovação e evidência esperada. A metodologia deve permitir que outra pessoa compreenda o procedimento executado e a razão da conclusão, inclusive quando o resultado apresenta ressalvas.
- Objetivo: qual requisito ou risco o teste examina?
- População: quais casos, operações ou registros poderiam ser selecionados?
- Procedimento: o que será conferido e por qual método?
- Critério: que condição caracteriza aprovação, exceção ou falha?
- Evidência: o que deve ser preservado para reproduzir a verificação?
Separe o responsável pelo controle de quem avalia seu resultado, sempre que o desenho de governança permitir. Onde a estrutura for menor, documente as salvaguardas de revisão. A participação da área operacional é importante para explicar o fluxo, mas não deve substituir a análise crítica do avaliador.
Como definir uma amostra sem criar falsa segurança
Uma amostra precisa de justificativa. Defina a população, a forma de seleção e os limites de inferência. Selecionar os primeiros registros disponíveis pode deixar de fora exceções, casos de maior risco ou períodos com alteração do processo.
Considere estratos relevantes: canais, categorias de risco, unidades, novos clientes e casos escalados. A combinação de seleção aleatória e dirigida pode ser útil para objetivos distintos, desde que cada parte esteja identificada. Uma seleção dirigida a falhas conhecidas não representa automaticamente toda a população.
Não existe um tamanho único de amostra que torne qualquer avaliação adequada. Complexidade, frequência do controle, variabilidade dos casos e objetivo do teste afetam a escolha. Registre o motivo da seleção e evite apresentar uma taxa observada em poucos casos como certeza sobre a operação inteira.
Indicadores úteis e suas limitações
Indicadores apoiam a leitura dos testes quando têm definição estável. Informe numerador, denominador, período, fonte e exclusões. Uma melhora percentual pode decorrer de mudança na população ou no registro dos casos, não necessariamente de um controle mais eficaz.
- Cobertura: proporção da população prevista efetivamente alcançada pelo controle.
- Execução: etapas realizadas conforme o procedimento e exceções justificadas.
- Qualidade: suficiência das evidências e consistência das conclusões.
- Prazo: casos concluídos no prazo aplicável, separando atrasos e seus motivos.
- Correção: ações encerradas com evidência e resultado do reteste.
Use indicadores por segmento quando uma média esconder diferenças relevantes. Se um canal concentra pendências, o desempenho global pode parecer satisfatório enquanto a exposição local permanece. Preserve as regras de cálculo para permitir comparação entre períodos.
Exemplo de teste: encerramento de alertas em PLD
Em um exemplo fictício, a equipe avalia alertas encerrados em determinado trimestre. A população inclui segmentos de risco distintos. O teste procura confirmar se o parecer explica a análise, cita evidências pertinentes e registra a aprovação exigida pelo procedimento.
Na amostra, aparecem encerramentos com justificativa padronizada e sem referência às operações examinadas. O achado não prova, sozinho, que todos os alertas foram mal tratados. Ele demonstra uma deficiência na evidência dos casos testados e justifica avaliar sua extensão, causa e impacto.
A correção combina revisão dos casos afetados, orientação dos responsáveis e verificação posterior. A trilha de auditoria deve preservar o teste original e o reteste. Substituir o parecer antigo por um texto novo, sem histórico, compromete a explicação do que ocorreu.
Como registrar achados e acompanhar o plano de ação
Descreva condição observada, critério esperado, evidência, alcance conhecido e consequência potencial. Diferencie falta de informação para concluir de falha confirmada. Quando houver indício de um problema mais amplo, indique o procedimento necessário para verificar a extensão.
Classifique a relevância segundo critérios internos claros e vincule a resposta à causa identificada. Um treinamento pode ajudar quando existe dúvida de execução; ele não corrige um sistema que deixa parte da população fora do controle. A ação precisa responder ao problema demonstrado.
- Ação corretiva específica e responsável com autoridade para executá-la.
- Prazo, dependências e medidas durante a exposição remanescente.
- Evidência exigida para comprovar implementação.
- Reteste ou verificação para confirmar o funcionamento.
- Decisão documentada para atrasos, exceções e risco aceito.
A entrega de um arquivo ou de uma tela não deve encerrar automaticamente a pendência. Confira se a medida entrou em operação e respondeu ao achado. Se o reteste identificar a mesma deficiência, registre o resultado e reavalie o plano antes de declarar o assunto resolvido.
O planejamento dos testes deve considerar a avaliação interna de risco, ou AIR. Esse diagnóstico orienta quais exposições merecem atenção; os achados dos testes, por sua vez, podem indicar que a avaliação de risco ou o desenho do controle precisa ser revisto.
Referência regulatória e relação com a AIR
Os arts. 62 a 65 da Circular BCB nº 3.978 disciplinam a avaliação de efetividade, anual, nas instituições abrangidas. Consulte a norma para o calendário e a governança exigidos. AIR e efetividade têm funções e ciclos distintos; não trate a atualização de um documento como execução do outro.
A AIR aponta exposições e orienta controles; a avaliação de efetividade examina suas respostas. Os exemplos, indicadores e critérios deste artigo são sugestões metodológicas, a adaptar à operação e ao supervisor competente. O relatório deve deixar claras as limitações dos testes realizados.
Perguntas frequentes
O que é avaliação de efetividade em PLD/FT?
É a verificação de que os controles do programa funcionam e respondem aos riscos. A conclusão deve ser sustentada por metodologia, testes e evidências, com tratamento das deficiências encontradas.
Avaliação de efetividade e AIR são iguais?
Não. A AIR identifica a exposição institucional; a avaliação de efetividade verifica a resposta dos controles. Os resultados se complementam, mas um trabalho não substitui o outro.
Existe um tamanho obrigatório de amostra para qualquer teste?
Não há um tamanho universal adequado a todos os testes. A seleção deve considerar população, objetivo, risco, variabilidade e regras aplicáveis. Registre a metodologia e os limites da conclusão.
Quando um achado pode ser considerado resolvido?
Quando houver evidência de implementação e verificação suficiente de que a ação respondeu à deficiência. A conclusão deve seguir os critérios de governança; a entrega de um documento, sozinha, pode ser insuficiente.




