Apa yang terjadi
Analisis kebijakan GovAI berpendapat bahwa "perusahaan AI frontier dan organisasi evaluasi AI harus mempublikasikan kontrak evaluasi mereka bersama dengan laporan evaluasi publik mana pun." Karena kredibilitas evaluasi pihak ketiga bergantung pada ketentuan kontraktual yang mengatur akses, hak publikasi, pembayaran, dan aturan konflik kepentingan, rekomendasi ini meminta publikasi kontrak penuh dengan redaksi yang dibatasi pada informasi yang bersifat proprietary, sensitif keamanan, dan pribadi/pihak ketiga — atau setidaknya mengungkapkan ketentuan yang paling material untuk interpretasi temuan. Dokumen ini menetapkan daftar istilah kunci yang tidak lengkap dan pengaruhnya terhadap kredibilitas, mengutip preseden DSA di mana perjanjian audit harus dilampirkan pada laporan audit yang dipublikasikan, dan mempertimbangkan sisi negatif (jaminan palsu, keengganan memberikan akses luas) dibandingkan manfaat keterbandingan dan kondisi negosiasi yang lebih kuat bagi evaluator.
Mengapa penting
Ini menawarkan tuas transparansi yang konkret dan berbiaya rendah bagi siapa pun yang memesan, menerima, atau mengandalkan evaluasi AI pihak ketiga — secara langsung mempengaruhi seberapa besar jaminan yang benar-benar diberikan oleh klaim keselamatan.
Tindakan yang diperlukan
Untuk setiap evaluasi AI pihak ketiga yang Anda pesan atau terima, pastikan apakah kontrak yang mengatur dipublikasikan atau akan dipublikasikan bersama hasilnya, dan tinjau ketentuan akses/independensi.