Kerentanan  ·  2026-05-16

Para peneliti mengusulkan Model Keamanan Sistem Operasi untuk Kerangka Kerja AI Agent

KerentananMedium dampakGlobalNot applicable
Para peneliti dari TU Berlin dan Max Planck Institute for Security and Privacy menerbitkan analisis keamanan sistematis dari agen berbasis LLM melalui lensa keamanan sistem operasi. Makalah tersebut mensurvei agen gaya OpenClaw, menurunkan arsitektur agen terpadu, dan mengevaluasi empat agen yang banyak digunakan. Studi tersebut menemukan bahwa beberapa mekanisme perlindungan gagal di bawah kemampuan penyerang yang sederhana dan bahwa operasi yang aman memerlukan pengetahuan sistem terperinci dan konfigurasi yang hati-hati.
Penelitian menunjukkan bahwa agen AI dan sistem operasi menghadapi tantangan perlindungan yang analogis: keduanya menjalankan tindakan atas nama principal yang tidak dipercaya, mengekspos fungsionalitas istimewa melalui antarmuka terkontrol, dan harus mencegah data dan izin melampaui batas keamanan. Analogi memetakan LLM ke pengguna yang tidak dipercaya, runtime agen ke kernel, tools ke system calls, skills ke program, dan konteks LLM ke process memory.
Agen gaya OpenClaw dan sistem serupa yang mengekspos penggunaan tools yang luas, integrasi skill pihak ketiga, dan status yang persisten. Analisis kerentanan bersifat arsitektural daripada spesifik implementasi, berlaku untuk kelas framework agen otonomi yang lebih luas.
Terapkan prinsip keamanan OS yang sudah terbukti: isolasi, pemisahan privilege, mediasi, confinement, dan least privilege. Implementasikan batas kebijakan terpadu daripada penegakan trust per-layer. Perlakukan konteks agen sebagai memori yang tidak dipercaya; sandbox eksekusi skill; paksakan mandatory access control pada invocations tools; dan catat semua operasi istimewa untuk attribution dan audit.
Sumber
arXiv preprint
Lihat di umpan langsung Jelajahi temuan keamanan dan tata kelola AI terkait — diperbarui setiap pagi.
Buka umpan →