何が起きたか
promptfoo 0.125.0(10月23日)は破壊的変更を含むリリースで、jks-jsをオプションのピア依存関係とし、Claude Agent/Codex SDKをオプトインにしました。主要なセキュリティ関連の内容は、インラインJavaScript実行を無効化する「evalセーフモード」、新しい「arabic-presentation-forms」静的エンコーディングレッドチーム戦略、rouge-l/rouge-sアサーションタイプ、およびDaybreakアクセスプログラムプロバイダー設定です。
なぜ重要か
広く使われているLLM評価/レッドチームOSSツール内のセキュリティ関連の強化です。evalでのインラインJS実行を無効化することで、プロンプトインジェクション型のコード実行面が削減され、新しいエンコーディング戦略により、エンコーディングベースの攻撃に対するレッドチームのカバレッジが拡張されます。
適用範囲
LLM評価とレッドチームにpromptfooを使用しているチームは、バージョンを固定/アップグレードし、破壊的変更を確認し、プロンプトインジェクションテストのために新しいセーフモードとエンコーディング戦略を有効化すべきです。