為已在承擔真實工作的 AI 打造
審查您的 AI 在生產環境中做了什麼。
上線之後,由人在瀏覽器中審查 Oloproof 從真實流量中抽取的樣本,而內容始終留在您這一側。工作區依據他們的發現做出決定,而不是依據任何人選擇給它看的東西。
抽取
沒有人挑選的樣本
您的收集器透過 OpenTelemetry 接收追蹤紀錄,並以簽署的 Merkle 根為它封存的每一個小時做出承諾。接著工作區以自己的隨機性抽取樣本,並對照該承諾核對每一筆被抽中的追蹤紀錄,因此收集器封存的任何追蹤紀錄都無法被藏起來不參與抽取。
審查
在瀏覽器中審查
擁有者或管理員開啟一個審查佇列並指派審查者。每個人給出通過或失敗的判定、在宣告的量表上評分,或在兩個輸出之間做出盲選偏好,皆記錄在其本人帳戶下。為量測而抽取的項目在顯示時不附帶評審的判定。
留存
內容留在您這一側
在預設的資料外送政策下,工作區不保存任何輸入或輸出。審查者的瀏覽器透過部署簽發的五分鐘票證,從您網路中的收集器取得每個項目的內容,Oloproof 從不儲存這些內容。
工作區如何決定
對工作區所抽樣本給出的通過或失敗判定,會透過預測驅動推論來校正評審的通過率,工作區再以自己的引擎驗證該區間。它只計入自己封存的標註,且來自彼此獨立的帳戶,並以與每次執行相同的四種狀態做出決定:通過、失敗、證據不足或人工審查。分數與偏好會被儲存與顯示,在相應方法獲准之前不進入任何統計。