Voor compliance, risico en inkoop
Weet waartegen je AI-systeem is getest, en wie het heeft goedgekeurd.
Elke bevinding leidt terug naar de run die haar opleverde, de regel waaraan ze werd getoetst en de accounts die de release goedkeurden. Lees het in de browser, zonder iets te installeren.
Eisen
Je eisen, getoetst aan het bewijs.
Kies de catalogi die gelden waar het systeem wordt gebruikt. Elke eis luidt voldaan, niet voldaan, deels voldaan of niet te bepalen, met het bewijs erachter.
Bewijs
Elke bevinding herleid tot haar run
Een bevinding noemt de regel waarop ze rust, de run die haar besliste en de drempel waaraan ze werd getoetst. Alleen runs van de huidige versie van het systeem, gedaan binnen de beoordelingsperiode, kunnen aan een eis voldoen.
Goedkeuring
Wie de release heeft goedgekeurd
Waar het beleid erom vraagt, wacht een geslaagde release op goedkeuring door twee accounts, waarvan één een Owner. Het besluit blijft wat het bewijs zei, en het dossier noemt wie goedkeurde.
Wat het omvat
Voorbij de score: wat een beoordelaar van een release vraagt.
Governance
Eisen en goedkeuringen
Catalogi gekozen naar waar het systeem wordt gebruikt, een bevinding per eis, en goedkeuring van een geslaagde release waar het beleid erom vraagt. Gids over governance
Veiligheid en risico
Plafonds voor wat misgaat
Een plafond begrenst hoe vaak er iets misgaat op de cases in je suite. Een gevarenregister benoemt wat er mis kan gaan, en aanvalscases met een seed draaien in een sandbox. Gids over risicoplafonds
Eerlijkheid
Verschillen tussen groepen
Het grootste verschil in een fout-, fout-positief-, fout-negatief- of selectiepercentage tussen de groepen die je opgeeft, beslist op een interval, met kleine groepen gemeld als onvoldoende bewijs. Gids over eerlijkheid
Privacy
Persoonsgegevens en memorisatie
Controleert dat antwoorden geen persoonsgegevens bevatten en niets gememoriseerds herhalen, zonder de gezochte waarden op te slaan. Gids over privacy
Mensen en AI
Beoordelaars, en beslissingen met het systeem
Je beoordelaars labelen in de browser, blind. Een studie meet of mensen beter beslissen met de uitvoer van het systeem dan zonder. Gids over mensen en AI
Doorlopende assurance
Nog steeds waar na de release
Een besluit zegt of het systeem dat het beschrijft sindsdien is veranderd. Zodra het live is, beoordelen mensen een steekproef uit echt verkeer. Productiebeoordeling
Kun je laten zien waarom dit AI-systeem live mocht?
Oloproof bewaart het antwoord: wat er gemeten is, tegen welke drempel, wat er besloten is en wie het goedkeurde. Een team kan het bewijs van één run delen als een pagina die iedereen met de link kan openen, gemarkeerd als gemeld door de ontwikkelaar, zonder inhoud van de cases en zonder iets te installeren.