CIRIS has a new look. Visit the new site →

부록 D

치명적 위험 평가(CRE) 프로토콜


부속서 D 재앙적 위험 평가(CRE) 프로토콜

D‑1 발동 기준
다음 기준 중 하나라도 충족하는 시스템은 배포 전에 CRE를 통과해야 한다:
(a) 훈련 연산량이 10²⁶ FLOP을 초과하는 경우.
(b) 자율적 거래 권한이 평균 하루 > $10 M인 경우.
(c) 재귀적 사건: 시스템 자체의 인지 아키텍처, 목적 함수, 또는 PDMA 논리를 변경하려는 의도로 자율적 코드 생성, 가중치 수정, 또는 하이퍼파라미터 조정 기능을 개시하는 모든 행위.

D‑2 필수 산출물

  1. 독립적 레드팀 보고서 (≥ 1 FTE‑month).
  2. 해석 가능성 / 잠재 목표 탐사 연구.
  3. 킬스위치 및 격리 테스트 결과.
  4. 현재 최전선 모델 대비 비교 기준선.
  5. 개발 조직 외부의 두 담당자에 의한 이중 승인.

D‑3 공개 및 에스크로
• 요약 보고서는 30일 이내에 공개.
• 전체 기술 패키지는 인정된 국가 안전 당국에 에스크로 보관.

D‑4 재인증
• 모든 주요 모델 개정(> 2 % 매개변수 변화 또는 아키텍처 변경) 후 의무적으로 실시.

D‑5 실패 대응
• 결함이 시정되고 재감사가 완료될 때까지 배포 차단.

이 페이지에서