Para IA que já faz trabalho real
Revise o que a sua IA faz em produção.
Depois que ele entra no ar, pessoas revisam uma amostra que o Oloproof sorteia do tráfego real, no navegador, enquanto o conteúdo fica do seu lado. O espaço de trabalho decide com base no que elas encontraram, não no que alguém escolheu mostrar.
Sortear
Uma amostra que ninguém escolheu
Seu coletor recebe seus traces via OpenTelemetry e se compromete com cada hora que selou por meio de uma raiz de Merkle assinada. Em seguida, o espaço de trabalho sorteia a amostra com sua própria aleatoriedade e confere cada trace sorteado contra esse compromisso, de modo que nenhum trace selado pelo coletor pode ser retido fora do sorteio.
Revisão
Revisores no navegador
Um Owner ou Admin abre uma fila de revisão e atribui revisores. Cada um dá um veredito de aprovado ou reprovado, uma nota numa escala declarada ou uma preferência às cegas entre duas saídas, registrados na própria conta. Os itens sorteados para medição aparecem sem o veredito do juiz.
Guardar
O conteúdo fica do seu lado
Com a política de egress padrão, o espaço de trabalho não guarda entradas nem saídas. O navegador do revisor busca o conteúdo de cada item no coletor da sua rede, com um ticket de cinco minutos assinado pela implantação, e o Oloproof nunca o armazena.
O que o espaço de trabalho decide
Vereditos de aprovado ou reprovado sobre uma amostra que o espaço de trabalho sorteou corrigem a taxa de aprovação de um juiz, por inferência potencializada por predição, e o espaço de trabalho verifica esse intervalo com seu próprio motor. Ele só conta os rótulos que ele mesmo selou, vindos de contas independentes, e decide com os mesmos quatro estados de toda execução: aprovado, reprovado, evidência insuficiente ou revisão manual. Notas e preferências são armazenadas e exibidas, e não entram em nenhuma estatística até que um método para elas seja admitido.