Dành cho AI đã đang làm việc thật
Xem xét AI của bạn làm gì trong môi trường vận hành.
Khi đã chạy thật, con người xem xét, ngay trong trình duyệt, một mẫu Oloproof rút ra từ lưu lượng thực, trong khi nội dung vẫn ở phía bạn. Không gian làm việc quyết định dựa trên những gì họ tìm thấy, không phải dựa trên những gì ai đó chọn cho nó xem.
Rút mẫu
Một mẫu không ai chọn
Bộ thu thập của bạn nhận các trace qua OpenTelemetry và cam kết cho mỗi giờ nó đã niêm phong bằng một gốc Merkle có chữ ký. Sau đó không gian làm việc rút mẫu bằng nguồn ngẫu nhiên của chính nó và đối chiếu từng trace được rút với cam kết đó, nên không trace nào mà bộ thu thập đã niêm phong có thể bị giữ lại khỏi lần rút.
Xem xét
Người xem xét trong trình duyệt
Một Owner hoặc Admin mở một hàng đợi xem xét và phân công người xem xét. Mỗi người đưa ra một phán quyết đạt hoặc không đạt, một điểm trên thang đo đã khai báo, hoặc một lựa chọn ưu tiên mù giữa hai đầu ra, được ghi lại dưới tài khoản của chính họ. Các mục được rút để đo lường được hiển thị mà không kèm phán quyết của giám khảo.
Giữ
Nội dung ở lại phía bạn
Theo chính sách gửi dữ liệu ra mặc định, không gian làm việc không giữ đầu vào hay đầu ra nào. Trình duyệt của người xem xét lấy nội dung của từng mục từ bộ thu thập trong mạng của bạn, bằng một vé năm phút do bản triển khai ký, và Oloproof không bao giờ lưu trữ nó.
Điều không gian làm việc quyết định
Các phán quyết đạt hoặc không đạt trên một mẫu do không gian làm việc rút ra sẽ hiệu chỉnh tỷ lệ đạt của một giám khảo, bằng suy luận dựa trên dự đoán, và không gian làm việc xác minh khoảng đó bằng chính engine của nó. Nó chỉ tính những nhãn do chính nó niêm phong, từ các tài khoản độc lập, và quyết định bằng cùng bốn trạng thái như mọi lần chạy: đạt, không đạt, không đủ bằng chứng hoặc cần xem xét thủ công. Điểm số và lựa chọn ưu tiên được lưu và hiển thị, và không đi vào thống kê nào cho đến khi một phương pháp cho chúng được chấp thuận.