Modalidades

Escopo definido por projeto.

Caixa-preta

Acessa

Saídas do sistema, por meio de consultas controladas.

Entrega

Análise das saídas e sondagem por consultas; laudo e Resumo Público de Resultados.

Caixa-branca

Acessa

O modelo: parâmetros, arquitetura e processo de treino.

Entrega

Bateria de testes T1 a T6; laudo e Resumo Público de Resultados.

Sequência de método

Avaliação com acesso técnico ao modelo, em seis análises:

  1. T1 Mapa de estabilidade: se o modelo está em um ponto de treino estável ou frágil.
  2. T2 Fragilidade por grupo: quais grupos ficam mais sensíveis a pequenas mudanças.
  3. T3 Limite de confiança: até onde a leitura do modelo é confiável.
  4. T4 Dados que mais pesam: quais dados de treino mais influenciam as decisões.
  5. T5 Teste de compactação: se reduzir o modelo afeta grupos de forma desigual.
  6. T6 Consistência entre execuções: se o mesmo treino produz resultados diferentes entre grupos.