Teste amostral
Também conhecido como: Prova de conceito · PoC · Piloto · Backtest · Teste de validação
Validação do score numa amostra da sua própria base histórica, com critérios de sucesso fixados antes, para medir o ganho real sem mexer na operação.
Na Zarv
Validação em 2 fases — piloto e expansão — sobre a base histórica, sem nenhuma mudança na operação.
Antes de ligar um score na produção, o teste amostral responde a uma pergunta de negócio com dados que você já tem: nesta carteira, este score separa risco o suficiente para valer a decisão? Analisa-se uma amostra da base histórica — casos com e sem ocorrência — e medem-se Gini, lift por decil e ganho incremental sobre o modelo atual, cada um com intervalo de confiança.
O que torna o resultado objetivo é fixar os critérios de sucesso antes de ver os dados, e rodar em duas fases: um piloto menor que precisa atingir o critério, e só então a expansão. Nada na operação muda durante o teste — ele mede o que o score teria feito, não o que ele muda daqui para frente.
Perguntas frequentes
O que é um teste amostral de score?
É uma validação do score sobre uma amostra da base histórica da própria empresa, com critérios de sucesso definidos antes do teste, para medir o ganho real (Gini, lift, ganho incremental) sem alterar a operação.