본문으로 건너뛰기

컴플라이언스, 리스크, 구매 담당자를 위해

AI 시스템이 무엇을 기준으로 테스트되었고 누가 승인했는지 알아보세요.

모든 결과는 그것을 만든 실행, 적용된 규칙, 릴리스를 승인한 계정까지 거슬러 올라갑니다. 아무것도 설치하지 않고 브라우저에서 읽으세요.

요구 사항

요구 사항을 증거와 대조해 확인합니다.

시스템이 사용되는 곳에 적용되는 카탈로그를 선택하세요. 각 요구 사항은 충족, 미충족, 부분 충족, 판단 불가 중 하나로 표시되며, 그 근거가 되는 증거가 함께 제시됩니다.

근거

각 결과를 해당 실행까지 추적

결과에는 그 근거가 되는 규칙, 이를 판정한 실행, 비교한 기준값이 명시됩니다. 시스템의 현재 버전으로 검토 기간 내에 수행된 실행만 요구 사항을 충족할 수 있습니다.

승인

누가 릴리스를 승인했는가

정책이 요구하는 경우, 통과한 릴리스는 두 계정의 승인을 기다리며 그중 하나는 Owner입니다. 결정은 증거가 말한 그대로 남고, 기록에는 누가 승인했는지가 남습니다.

다루는 범위

점수 너머: 검토자가 릴리스에 묻는 것.

거버넌스

요구 사항과 승인

시스템이 사용되는 곳에 따라 선택되는 카탈로그, 요구 사항마다의 결과, 그리고 정책이 요구할 때 통과한 릴리스의 승인. 거버넌스 가이드

안전과 위험

잘못되는 일의 상한

상한은 스위트에 담긴 케이스에서 무언가 잘못되는 빈도를 제한합니다. 위험 등록부는 잘못될 수 있는 일을 정리하고, 시드가 있는 공격 케이스는 샌드박스에서 실행됩니다. 리스크 상한 가이드

공정성

그룹 간 격차

선언한 그룹 간 오류율, 위양성률, 위음성률 또는 선택률의 가장 큰 격차를 구간으로 판정하며, 작은 그룹은 증거 부족으로 보고합니다. 공정성 가이드

개인정보

개인 데이터와 암기

답변에 개인 데이터가 없고 암기한 내용을 반복하지 않는지, 찾는 값을 저장하지 않고 확인합니다. 개인정보 가이드

사람과 AI

검토자, 그리고 시스템과 함께한 결정

검토자는 브라우저에서 블라인드로 라벨을 붙입니다. 연구는 사람들이 시스템 출력이 있을 때 없을 때보다 더 잘 결정하는지 측정합니다. 사람과 AI 가이드

지속적 보증

출시 후에도 유효

결정은 그것이 설명하는 시스템이 이후 바뀌었는지를 알려 줍니다. 운영에 들어가면 사람이 실제 트래픽에서 추출한 표본을 검토합니다. 운영 검토

이 AI 시스템이 출시될 수 있었던 이유를 보여줄 수 있나요?

Oloproof가 그 답을 보관합니다. 무엇을 측정했는지, 어떤 기준값과 비교했는지, 무엇을 결정했는지, 누가 승인했는지. 팀은 한 실행의 증거를 링크가 있는 누구나 열 수 있는 페이지로 공유할 수 있으며, 이 페이지는 개발자가 보고한 것으로 표시되고 케이스 내용은 포함되지 않으며 아무것도 설치할 필요가 없습니다.