무슨 일이 있었나
2026년 8월 7일, NIST는 NIST AI 200-2 'AI 시스템 평가를 위한 TEVV-Athlon 프레임워크'의 초안을 발표 및 공개했습니다. 이는 NIST AI 위험 관리 프레임워크의 측정 기능에서 요구되었으나 이전에는 규정되지 않았던 테스트, 평가, 검증 및 검사(TEVV) 방법론을 구체화하는 새로운 문서입니다. 본 프레임워크는 조직이 통계 ML, LLM, 다중모달 모델 및 자율 시스템을 아우르는 맞춤형 AI 시스템 평가('TEVV-Athlons')를 구축하기 위한 4단계 방식(조직 및 정의, 구성 및 개발, 적용 및 측정, 종합 및 검토)을 정의합니다. 60일의 공개 의견 제출 기간은 2026년 10월 6일까지 진행됩니다.
왜 중요한가
이는 광범위하게 채택된 AI RMF의 '측정' 기능을 구체화하기 위한 첫 번째 규정적 NIST 방법론이며, 그동안 구체적인 평가 방법론이 부족했습니다. 조직, 감사인, 구매 팀 및 평가자에게 AI 시스템 안전성/성능에 대한 증거를 생성하기 위한 체계적이고 확장 가능한 접근 방식을 제공하며, 이는 AI 보안 보증, 적대적 테스트 및 AI RMF를 기반으로 하는 거버넌스를 이미 수립한 부문의 배포 전 검증 프로그램과 직접적으로 관련이 있습니다.
필요한 조치
보안 및 AI 거버넌스 팀은 초안을 검토하고 2026년 10월 6일까지 의견을 제출해야 하며, AI 평가/TEVV 프로그램을 구축하는 팀은 최종화 전 기존 적대적 테스트 및 벤치마크 관행을 4단계 TEVV-Athlon 구조에 매핑하기 시작해야 합니다.