AI는 답변·거절·충돌 보고 중 무엇을 선택해야 할까

증거 부족과 증거 모순은 다른 실패입니다. 전자는 추가 증거나 거절이 필요하고 후자는 충돌, 버전, 범위를 밝혀야 합니다. 둘 다 “확신하면 답한다”로 처리하면 근거 없는 단정이 생깁니다.

2026년 8월 27일 제출된 *Knowing Before Answering*은 검색 상태를 Answer, Refuse, Conflict로 구분합니다. 증거가 충분하고 일관되면 답변하고, 부족하면 거절하며, 근거 있는 여러 답이 서로 다르면 충돌로 표시합니다.

답변과 거절의 2분법이 부족한 이유

이전·현재 가격, 지역별 정책, 이름이 비슷한 제품 사양은 각각 출처를 가질 수 있습니다. 단순 거절은 유용한 정보를 잃고 하나를 조용히 선택하면 틀릴 수 있습니다. 시간, 지역, 버전, 게시자 차이를 유지해야 합니다.

각 GEO 테스트에 증거 상태를 추가합니다.

• 답변 가능: 핵심 주장에 일관되고 접근 가능한 최신 출처가 있음
• 부족: 관련 페이지는 있지만 필요한 사실이 없음
• 충돌: 둘 이상의 출처가 다른 답을 뒷받침하며 아직 해소되지 않음

그다음 AI 행동을 기록합니다. 충돌 상태에서 직접 답하면 “충돌 평탄화”입니다. 증거가 충분한데 거절한다면 콘텐츠 누락보다 검색, 맥락, 플랫폼 정책 문제일 수 있습니다.

GEO Radar(https://www.georadar.top)는 고정 질문으로 여러 AI의 답변, 출처, 경쟁사 차이를 관찰합니다. 3분법을 사람의 주석 계층으로 사용하면 콘텐츠 보완, 버전 수정, 플랫폼 모니터링을 구분할 수 있습니다.

논문의 핵심 벤치마크는 반사실 엔티티와 고정 5문서 맥락으로 7,173개 통제 표본을 만들었습니다. 자연 영역 전이 데이터에는 별도 충돌 라벨이 없어 상용 AI 전체의 정확도로 해석할 수 없습니다.

이 글의 자료 출처

• arXiv, 2026년 8월 27일, *Knowing Before Answering: Decoding Language Models for Reliable RAG*: https://arxiv.org/abs/2608.27661