휴먼 인 더 루프 (Human-in-the-Loop)

사람이 들어가는 위치와 역할을 정한다

HITL은 마지막 승인 버튼만을 뜻하지 않습니다. 목표와 기준을 정할 때, AI가 만든 후보를 수정할 때, 예외를 판단할 때, 실행 결과를 보고 지침을 개선할 때도 사람이 참여할 수 있습니다.

업무에서는 ‘사람이 봤다’는 기록만 남기기보다 무엇을 확인했고 무엇을 바꿨는지를 남겨야 합니다. 원문 없이 AI 초안만 읽으면 자연스러운 문장을 사실로 받아들일 수 있습니다.

BOAZ 위키에서 사람이 판단하는 여섯 가지

이 구분은 BOAZ가 문서와 세션을 위키로 정리하며 사용하는 운영 기준입니다. 모든 분야의 HITL에 동일한 여섯 항목이 필수라는 뜻은 아닙니다.

전체 위키보다 바뀌는 주장을 보여준다

AI는 기존 문장과 제안 문장, 원문 위치, 해석한 부분, 영향받는 페이지를 함께 준비합니다. 사람은 채택·수정·보류·제외를 판단하고 이유를 남깁니다. 검토 범위를 줄이되 판단에 필요한 근거까지 줄여서는 안 됩니다.

예를 들어 ‘교육에 사용할 예정’이라는 문장을 ‘교육에 사용했다’로 바꾸려면 실제 진행 근거가 필요합니다. 표현을 더 매끄럽게 만드는 것과 사실의 확정성을 높이는 것은 다른 변경입니다.

승인과 사실 검증을 따로 기록한다

사람이 초안을 채택했다고 모든 사실을 독립적으로 검증했다는 뜻은 아닙니다. 링크가 존재하고 인용 위치가 유효하다는 코드 검사도 사실 검증을 대신하지 않습니다. 출처 추적을 통해 원문을 확인하고, 확인하지 못한 부분은 남깁니다.

검토한 원문·초안의 버전도 중요합니다. 승인 뒤 내용이 달라졌다면 새 해석이 이전 승인 범위에 들어가는지 확인해야 합니다. 이미 승인한 같은 내용이나 명확히 지시한 수정은 재질문하지 않고, 달라진 부분을 대상으로 삼습니다.

업무에 맞는 검토 범위

이는 설계를 위한 예시입니다. 검토량이 늘어 형식적인 승인으로 흐른다면 예외 기준과 업무 범위를 다시 조정합니다. 반려가 없다는 사실만으로 잘못된 검토라고 단정할 수도 없습니다. 실제 품질과 검토 내용을 함께 봐야 합니다.

판단을 다음 실행에 남긴다

한 결과물만 고치고 끝내면 다음 작업에서도 같은 해석이 반복될 수 있습니다. 사람의 수정이 업무 사실의 변경인지, Skill의 절차 개선인지 구분해 반영합니다. 지식 갱신과 개선 Loop가 이어지는 지점입니다.