“인간 개입”은 체크리스트가 되었습니다. 실제로 유지되는 시스템에서는, 사용자가 무언가를 도달하기 전에 막을 권한과 정보를 가진 사람이 필요합니다.
아니오라고 말할 수 있는 리뷰
승인만 하는 리뷰어는 통제군이 아닙니다. 실제 검토를 위한 설계는 다음을 의미합니다:
- 신뢰가 낮거나 위험 부담이 높은 출력물을 기본적으로 사람에게 전달하는 것이지, 백업용이 아닙니다.
- 그 사람에게 단순히 답변이 아니라 증거 연계, 점수, 안전 통제 상태를 제공하는 것입니다.
- 결정을 기록해서 루프가 사후에 감사할 수 있게 하는 것입니다.
루프 설계
루프는 처음부터 아키텍처의 일부일 때 가장 저렴하게 구축할 수 있습니다 — 전달 워크플로우의 체크포인트일 뿐, 마지막에 덧붙인 회의가 아닙니다.