Apa yang terjadi
promptfoo 0.126.0 (18 Nov) memperkenalkan pemindaian kode repositori penuh (runtime Node 24, filesystem MCP server 2.3.0 yang ditambal) yang dapat membagikan file teks yang memenuhi syarat dan telah dikomit ke pemindai yang dihosting; membatasi akses ke kredensial cloud yang tersimpan di sistem POSIX dan meredaksi string koneksi Azure Storage di log/ekspor; membatasi panjang formula metrik turunan (1.024 karakter) sebelum evaluasi dijalankan. code-scan-action 0.2.3 menambahkan atestasi payload yang dapat dieksekusi dan menghapus instalasi CLI sementara setelah setiap pemindaian. Ini juga menambahkan penyedia untuk Claude Fable/Mythos 5.2, Gemini 4 Argon/Hydrogen, GPT-6.2 Astra/Sol, dan GPT-5.6 Cyber di Bedrock.
Mengapa penting
Ini adalah peningkatan penguatan dan kebersihan supply-chain yang signifikan untuk alat evaluasi dan red-teaming LLM/agen yang paling banyak digunakan — terutama melindungi kredensial cloud yang tersimpan, meredaksi rahasia di log, dan memungkinkan pemindaian repositori penuh yang dihosting.
Cakupan penerapan
Tim yang menjalankan promptfoo untuk evaluasi LLM/agen, red-teaming, dan CI pemindaian kode harus meningkatkan ke 0.126.0 / scan-action 0.2.3 untuk perbaikan penanganan kredensial dan pemindaian repositori penuh.