Langsung ke konten

Untuk kepatuhan, risiko, dan pengadaan

Ketahui apa acuan pengujian sistem AI Anda, dan siapa yang menyetujuinya.

Setiap temuan dapat ditelusuri ke run yang menghasilkannya, aturan yang dipakai untuk mengukurnya, dan akun yang menyetujui rilis. Baca di browser, tanpa memasang apa pun.

Persyaratan

Persyaratan Anda, diperiksa terhadap bukti.

Pilih katalog yang berlaku di tempat sistem digunakan. Setiap persyaratan terbaca terpenuhi, tidak terpenuhi, terpenuhi sebagian, atau tidak dapat ditentukan, beserta bukti di baliknya.

Bukti

Setiap temuan ditelusuri ke run-nya

Sebuah temuan menyebut aturan yang menjadi dasarnya, run yang memutuskannya, dan ambang yang dipakai untuk mengukurnya. Hanya run dari versi sistem saat ini, yang dibuat dalam periode tinjauannya, yang dapat memenuhi persyaratan.

Persetujuan

Siapa yang menyetujui rilis

Jika kebijakan memintanya, rilis yang lolos menunggu persetujuan dari dua akun, salah satunya Owner. Keputusan tetap sesuai yang dikatakan bukti, dan catatan menyebut siapa yang menyetujui.

Yang dicakup

Melampaui skor: apa yang ditanyakan peninjau tentang sebuah rilis.

Tata kelola

Persyaratan dan persetujuan

Katalog yang dipilih menurut tempat sistem digunakan, temuan untuk setiap persyaratan, dan persetujuan rilis yang lolos jika kebijakan memintanya. Panduan tata kelola

Keamanan dan risiko

Batas atas untuk kesalahan

Batas atas membatasi seberapa sering sesuatu salah pada kasus yang ada di suite Anda. Register bahaya menyebut apa yang bisa salah, dan kasus serangan dengan seed dijalankan di sandbox. Panduan batas risiko

Keadilan

Selisih antarkelompok

Selisih terbesar dalam tingkat kesalahan, positif palsu, negatif palsu, atau seleksi antara kelompok yang Anda nyatakan, diputuskan pada sebuah interval, dengan kelompok kecil dilaporkan sebagai bukti tidak cukup. Panduan keadilan

Privasi

Data pribadi dan hafalan

Memeriksa bahwa jawaban tidak memuat data pribadi dan tidak mengulang apa pun yang dihafal, tanpa menyimpan nilai yang dicarinya. Panduan privasi

Manusia dan AI

Peninjau, dan keputusan bersama sistem

Peninjau Anda memberi label di browser, secara buta. Sebuah studi mengukur apakah orang memutuskan lebih baik dengan keluaran sistem daripada tanpanya. Panduan manusia dan AI

Penjaminan berkelanjutan

Tetap berlaku setelah dirilis

Sebuah keputusan menyatakan kapan sistem yang dijelaskannya telah berubah sejak itu. Setelah berjalan, orang meninjau sampel yang diambil dari lalu lintas nyata. Tinjauan produksi

Bisakah Anda menunjukkan mengapa sistem AI ini diizinkan untuk dirilis?

Oloproof menyimpan jawabannya: apa yang diukur, terhadap ambang mana, apa yang diputuskan, dan siapa yang menyetujuinya. Tim dapat membagikan bukti satu run sebagai halaman yang dapat dibuka siapa pun yang memiliki tautannya, diberi label dilaporkan oleh pengembang, tanpa isi kasus dan tanpa memasang apa pun.