KIC AI Agent 본선 15점이 걸린 환각 대응, 예선 기획서에서는 어디에 적어 둘까요? | DAKER 커뮤니티

국부펀드 KIC, AI 에이전트 공모전 본선 발표 평가에는 「결과의 신뢰성」 15점이 따로 있고, 평가 내용은 근거·출처 확인과 오류·환각 대응입니다. 본선은 12월이지만 예선 기획서가 11월 12일(목) 10:00에 닫히고 그 뒤에는 고칠 수 없으니, Agent가 틀린 답을 어떻게 걸러낼지는 지금 기획서에 한 단락이라도 적어 두는 편이 좋습니다. 2026년 11월 5일(목) 아침 DAKER 해커톤 페이지에는 참가 845명, 기획서 제출 163건이 표시돼 있었습니다.

보고서 두 부를 원문 자료와 대조하며 확인하는 세 명의 팀원 (DAKER 대회 설명용 만화풍 이미지) 모션 미리보기
설명을 돕기 위해 만든 생성 이미지입니다.
보고서 두 부를 원문 자료와 대조하며 확인하는 세 명의 팀원 (DAKER 대회 설명용 만화풍 이미지)
설명을 돕기 위해 만든 생성 이미지입니다.
AI 답변을 근거 자료로 되짚어 확인하는 과정을 네 컷으로 나눈 만화
설명을 돕기 위해 만든 생성 이미지입니다.

결과의 신뢰성 15점은 무엇을 보나요?

결과의 신뢰성이란 Agent가 내놓은 답에 근거와 출처가 붙어 있고, 틀렸을 때 그것을 알아차리는 장치가 있는지를 뜻합니다. 공식 평가표는 본선 발표 평가 100점 중 이 항목에 15점을 배정했습니다. 예선 평가표에는 같은 이름의 항목이 없지만, 「AI Agent 구성 및 설계」 25점이 Workflow와 Tool/API 활용을 보기 때문에 검증 단계를 Workflow 안에 넣어 두면 예선과 본선이 한 줄로 이어집니다.

단순하게 적으려면 어떻게 할까요?

Karpathy Guidelines가 강조하는 것은 목표를 검증 가능한 기준으로 바꾸고 필요한 만큼만 만드는 태도입니다. 환각 대응도 거창한 장치보다 「무엇을 확인하면 통과인가」를 먼저 적는 쪽이 읽기 쉽습니다.

  1. AI Agent 구성 장에서 Agent가 답을 내기 직전 출처를 대조하는 단계를 Workflow 한 칸으로 그립니다.
  2. 데이터 활용 계획 장에 대조에 쓸 공개 데이터나 API와 수집일을 적습니다.
  3. MVP 개발 계획 장에 「출처가 없으면 답 대신 확인 필요로 표시」처럼 본선 기간에 만들 최소 동작을 적습니다.

짧은 예시: 공시 요약 Agent라면 요약 문장마다 원문 공시 번호를 붙이고, 번호를 찾지 못한 문장은 사람이 검토할 목록으로 넘긴다고 적을 수 있습니다.

근거와 한계

평가 항목·배점·마감 시각은 DAKER 해커톤 공식 페이지에서 2026년 11월 5일(목) 아침에 확인했습니다. 예선 심사위원이 검증 단계를 어떻게 평가할지는 공식 페이지에 적혀 있지 않으므로, 이 글은 점수를 약속하지 않습니다.

자주 묻는 질문

본선 평가 항목이 예선 점수에 들어가나요?

아닙니다. 예선은 전문가 평가 70%와 상호 평가 30%로 본선 12팀을 고르고, 결과의 신뢰성 15점은 본선 발표 평가 항목입니다.

외부 API로 검증해도 되나요?

유료·무료 AI 모델과 API를 모두 쓸 수 있으며, 사용한 외부 자원은 출처를 명시해야 합니다.

마감 뒤에 검증 단계를 추가할 수 있나요?

마감 이후 제출과 수정은 할 수 없습니다.

우리 팀 Agent는 틀린 답을 어떻게 걸러내는지 댓글로 한 줄 나눠 주세요.