O que a prática reconhecida exige, o que o ZORMA entrega, e o que ele não entrega.
Este documento não avalia o ZORMA. Ele o confronta com o que consta em orientação supervisória e em literatura de gestão de risco de modelos. A coluna de não-conformidade foi preenchida primeiro, de propósito: uma matriz em que alguém se avalia contra práticas que ele mesmo selecionou não é evidência, é peça de marketing.
← kalverx.com.br · Ferramenta: index.html · Manual · Nota técnica
A primeira versão desta matriz ancorou-se no SR 11-7. Essa norma foi revogada em 17 de abril de 2026 pelo SR 26-2, emitido conjuntamente por Federal Reserve, FDIC e OCC, que também absorve o SR 21-8. Toda referência foi corrigida.
Havia um segundo erro, independente do primeiro: o texto sugeria que a orientação obrigava o comprador que identificamos. Não obriga. Nem o SR 11-7 obrigava fintech ou varejista — a orientação supervisória alcança organizações bancárias supervisionadas, e o SR 26-2 estreita ainda mais esse alcance.
| Dimensão | SR 11-7 (2011–2026) | SR 26-2 (desde abr/2026) | Efeito |
|---|---|---|---|
| Caráter | Sem ressalva de exigibilidade | Explicitamente não vinculante; descumprimento isolado não gera crítica supervisória | enfraquece |
| Alcance | Organizações bancárias supervisionadas | Principalmente acima de US$ 30 bi em ativos | enfraquece |
| Definição de modelo | Ampla | Acrescenta o qualificador "complexo"; exclui cálculo aritmético simples e regra determinística | enfraquece |
| Frequência de revalidação | Anual, na prática, como padrão | Função de materialidade, velocidade de mudança e disponibilidade de dado | enfraquece |
| Modelos de terceiros | Tratado dentro do arcabouço geral | Seção dedicada e tratamento mais explícito | reforça |
| Quando o código é proprietário | Princípios gerais | Validação recai sobre análise de resultados e backtesting | reforça muito |
| Natureza do rigor | Embutido em regras | Precisa ser demonstrado por julgamento documentado | reforça muito |
A organização bancária usuária continua responsável por entender, validar, monitorar e documentar o uso de modelos de terceiros. SR 26-2 · seção dedicada a produtos de fornecedor
Quando o código subjacente não está disponível, as equipes de validação precisam apoiar-se fortemente em análise de resultados e backtesting para avaliar se o modelo permanece adequado ao propósito. Análise da Lumenova sobre o SR 26-2
O argumento de obrigação enfraqueceu; o de utilidade fortaleceu. Sob o SR 11-7 o rigor vinha da regra: fazia-se porque estava escrito. Sob o SR 26-2 a checklist saiu e o rigor precisa ser demonstrado. Quem tira a régua da parede passa a precisar de instrumento próprio.
E há um encaixe literal: a norma nova diz que, quando o código é proprietário, a validação recai sobre análise de resultados e backtesting. São as duas coisas que o ZORMA faz, e as únicas que não exigem acesso ao interior do modelo.
O comprador que identificamos — fintech, varejista médio, banco fora do porte de US$ 30 bi — não está sob esta orientação, e a norma é não vinculante mesmo para quem está. Afirmar obrigação regulatória a um gerente de risco de fintech é errado e ele saberá disso.
A formulação que a evidência sustenta é outra: é prática reconhecida, com seção dedicada em orientação interagências, que quem usa score de terceiro responde por validá-lo — e que essa validação, com código proprietário, se faz por análise de resultados e backtesting. Prática reconhecida vende para quem quer defender uma decisão. Obrigação inexistente não vende para ninguém e queima credibilidade.
Começa por aqui porque é a parte que um validador vai procurar primeiro.
| Prática | Fonte | Situação | O que falta |
|---|---|---|---|
| Monitoramento contínuo do desempenho ao longo do tempo | SR 26-2 · pilar de monitoramento contínuo | NÃO ATENDE | Cada rodada é isolada. Não há histórico, comparação entre laudos nem alerta de deriva. Exige guardar rodadas anteriores — viável em armazenamento local, sem quebrar a arquitetura sem servidor |
| Análise de sensibilidade | Protiviti · uma das três abordagens típicas para modelo de fornecedor | NÃO ATENDE | Os limiares são declarados mas não se mede como o veredito mudaria se fossem outros. É a pergunta natural de um comitê de validação |
| Inventário de modelos e controle de versão | SR 26-2 · inventário e documentação | FORA DE ESCOPO | É função da instituição, não do instrumento. Registrado aqui para que ninguém suponha que o laudo cobre governança |
| Desafio efetivo por pessoal com autoridade e independência | BMA · definição de validação eficaz | ORGANIZACIONAL | O instrumento habilita o desafio; a independência de quem opera é condição da instituição e não pode ser conferida por software |
| Viés entre grupos protegidos | Prática corrente em governança de IA | NÃO MEDE | Declarado no laudo. Não deve ser inferido dele |
| Prática | Fonte | Situação | Como |
|---|---|---|---|
| Análise de resultados · comparação de saídas do modelo com desfechos reais | SR 26-2 | ATENDE | É o núcleo do protocolo. Seções 3 e 6 do laudo |
| Comparação contra alternativas | Protiviti · SR 26-2 | ATENDE | Teste incremental contra sinais triviais, seção 3.2. Vai além do usual: mede o que o score acrescenta, não só se ele vence |
| Validação em período não usado no desenvolvimento | SR 26-2 · backtesting em período não usado no desenvolvimento | ATENDE | Aferição temporal, seção 4.1. Implementada após esta revisão documental |
| Documentação de premissas e limitações | SR 26-2 · Model Audit Rule | ATENDE | Seção 8 do laudo e seção 6 da nota técnica. Premissas do operador separadas das medidas |
| Documentação de metodologia e fontes de dados | Model Audit Rule · SR 26-2 | ATENDE | Nota técnica, seções 2 a 4 |
| Independência entre quem desenvolve e quem valida | BMA · SR 26-2 | ATENDE POR DESENHO | O instrumento nunca teve contato com o desenvolvimento do score aferido |
| Detecção de vazamento de informação | Prática em validação estatística | ATENDE | Teste de permutação, seção 3.1 |
| Declaração de incerteza nas estimativas | Prática científica corrente | ATENDE | Intervalo de confiança em toda medida publicada |
Quatro elementos que não localizei descritos como prática corrente em nenhuma das fontes consultadas. Isso não prova que sejam inéditos — prova que não são padrão.
| Elemento | Prática usual | ZORMA |
|---|---|---|
| Aferição do próprio instrumento antes da medição | A ferramenta de validação é presumida correta | Controle positivo com alvo conhecido por álgebra, separado em correção e poder |
| Recusa de emitir conclusão | Relatórios concluem; ressalvas vão em nota de rodapé | Oito portões; fora do estado final o laudo é negado e a decisão vira "não há evidência", com o quanto falta calculado |
| Cobertura empírica dos próprios intervalos | Declara-se o método (bootstrap) e presume-se a cobertura nominal | Cobertura medida contra população de referência: 95,0% a 97,5% para nominal de 95% |
| Separação entre método e política de aceitação | Limiares apresentados como propriedades técnicas | Seis limiares declarados como política escolhida antes; três como método imutável. Permite discordar da política sem questionar o método |
"Não encontrei" não é "não existe". A busca cobriu orientação supervisória norte-americana, material de consultoria e literatura acessível — não cobriu documentação interna de instituições, que é onde práticas assim mais provavelmente existiriam sem publicação. Use estes quatro pontos como diferencial provável, nunca como afirmação de ineditismo.
A frase que a evidência sustenta não é "você deveria auditar seu fornecedor". É:
A orientação supervisória exige que você valide o score que compra, com o mesmo rigor de um modelo interno. Isso já é sua responsabilidade. A pergunta é quanto custa cumprir.
Muda a conversa de "por que eu faria isso" para "como eu faço isso mais barato". A primeira exige educar o mercado; a segunda, não.
Declare as três antes que perguntem. Um validador que descobre uma lacuna omitida desconfia de tudo; um que a encontra declarada no documento confia no resto. É o mesmo princípio que rege o laudo.
Nada aqui indica se alguém compra. Aderência documental e demanda comercial são independentes: um produto pode ser exemplarmente aderente e não ter comprador. Esta matriz melhora a conversa com quem já está interessado — não produz o interesse.
Essa continua sendo a única incerteza grande do projeto, e ela não se resolve com mais leitura.