무슨 일이 있었나
10월 23일 출시된 promptfoo 0.125.0은 jks-js를 선택적 피어 의존성으로 만들고 Claude Agent/Codex SDK를 옵트인으로 전환하는 브레이킹 릴리스입니다. 주요 보안 콘텐츠: 인라인 JavaScript 실행을 비활성화하는 'eval safe mode', 새로운 'arabic-presentation-forms' 정적 인코딩 레드팀 전략, rouge-l/rouge-s assertion 유형, Daybreak 액세스 프로그램 제공자 구성이 포함됩니다.
왜 중요한가
널리 사용되는 LLM 평가/레드팀 오픈소스 도구 내의 보안 관련 강화입니다: eval에서 인라인 JS 실행을 비활성화하여 프롬프트 인젝션 스타일의 코드 실행 표면을 줄이고, 새로운 인코딩 전략은 인코딩 기반 공격에 대한 레드팀 커버리지를 우회 및 우회 탐지로 확장합니다.
적용 범위
LLM 평가 및 레드팀을 위해 promptfoo를 실행하는 팀은 브레이킹 체인지를 고정/업그레이드하고 검토하며, 프롬프트 인젝션 테스트를 위해 새로운 안전 모드 및 인코딩 전략을 활성화해야 합니다.