나라장터 대회는 고정 LLM 위에서 24개 법령 항목을 판정합니다 | DAKER 커뮤니티

나라장터 24항목 판정
설명용 생성 이미지.

어제 대회판의 각도는 마감·일정이었습니다. 오늘은 각도를 바꿉니다. 앞에 두는 대상은 나라장터 자체입찰 공고 법령 위반사항 모니터링 AI 경진대회 한 장입니다. 2026년 9월 10일(목) 아침 기준으로 공식 개요와 공개 리더보드를 다시 열었습니다. 딥보이스·블랙박스·에너지전환 컨퍼런스·월간 해커톤은 맨 아래 한 줄 링크만 남깁니다. 월요일 GA 리포트와 섞지 않습니다. 다섯 장을 한 대회로 묶은 요약 글이 아닙니다.

나라장터(국가종합전자조달시스템)에는 수요기관이 직접 발주하는 자체입찰 공고가 상시 게시됩니다. 모든 입찰공고는 국가계약법령 등 관련 법령과 규정에 부합해야 합니다. 공고문 본문과 과업지시서·규격서 등 첨부 문서, 나라장터 메타데이터를 함께 봐야 하므로 담당자의 수작업만으로는 전체 공고를 상시 점검하기 어렵습니다. 입찰 참가자격의 부당한 제한처럼 공정한 경쟁을 해치는 형태로 위반이 나타날 수 있어, 위반 소지가 있는 공고를 빠르게 선별하고 판단 근거를 같이 제시하는 자동 검토가 필요합니다. 이 대회의 주제는 그 지점입니다. 나라장터 자체입찰 공고의 법령 위반사항 판정과 판단 근거 제시 AI 모델 개발입니다.

참가자가 만드는 산출물은 한 줄로 말하면 추론 파이프라인입니다. 입찰공고 1건(공고문·첨부 문서 텍스트 + 나라장터 등록 정보)을 입력받아 24개 검토 항목마다 법령 위반 여부(0/1)와, 위반으로 판단한 근거 문구를 출력합니다. 24개 중 23개는 국가계약법령·지방계약법령·중소기업제품 판로지원법령·소프트웨어진흥법령 등 관련 법령·예규·고시에 근거한 항목입니다. 24번만 공고서 내용과 나라장터 등록값의 일치 여부를 점검합니다. 항목별 정의와 근거 조문은 대회 데이터 항목표에 있습니다.

모델 가중치를 새로 학습해 올리는 장이 아닙니다. 평가 서버에 준비된 고정 LLM google/gemma-4-26B-A4B-it 하나를 전 참가자가 동일하게 씁니다. 보조 임베딩 모델 BAAI/bge-m3도 서버에 함께 제공됩니다. 파인튜닝(LoRA·QLoRA 등)과 모델 가중치·어댑터 제출·로드는 허용되지 않습니다. 학습용 라벨 데이터셋도 제공되지 않습니다. 무라벨 공고 20,000건과 라벨 예시 200건(dev)이 주어지고, 학습·검증에 필요한 라벨은 참가자가 직접 만드는 자가 라벨링 방식입니다. 제출은 submit.zip 업로드의 코드 제출 대회입니다. 제출된 코드가 평가 서버에서 실행되어 비공개 평가 데이터에 대해 추론합니다. 추론 실행 제한시간은 2시간이고, 1일 최대 제출은 1회입니다. 제출 후 점수가 바로 안 보이는 경우가 있을 수 있으며, 공식 평가 탭의 채점 대기시간 안내를 확인해야 합니다.

채점의 뼈대도 공식 평가 안내와 같습니다. 리더보드 산식은 Macro F1입니다. 24개 검토 항목 각각에서 위반(=1) 클래스 F1을 구한 뒤 단순 평균합니다. 위반 여부 열(v1~v24)만 리더보드에 반영되고, 근거 문구 열(e1~e24)은 2차 정성평가 재료로 보존됩니다. Public Score는 전체 테스트 데이터 1,853건 100%이며, Private Score는 대회 종료 시점의 Public Score입니다. 1차 평가는 Private 리더보드 기준 상위 15팀을 2차 평가로 보냅니다. 2차 평가는 재현 검증과 근거 문구 정성평가를 진행하고, 정량 80%와 정성 20%를 종합해 최종 상위 7팀을 수상팀으로 선정합니다. 개요 카드 상금은 4,200만 원입니다. 주최는 행정안전부·한국지능정보사회진흥원, 주관은 조달청, 운영은 데이콘입니다. 참가 자격은 대한민국 국민 누구나이며, 팀 최대 인원은 5명입니다.

오늘 아침 개요 카드의 참가자는 835명입니다. 어제(9월 9일) 스냅샷 807명보다 28명 많습니다. 종료까지 표시는 D-20입니다. 참가 신청 시작은 8월 18일, 온라인 사전 설명회는 8월 24일 14:00, 대회 시작은 8월 26일입니다. 다음으로 다가오는 날짜는 9월 23일 팀 병합 마감, 9월 29일 10:00 리더보드 제출 마감, 9월 30일 10:00 대회 종료입니다. 2차 평가 자료 제출 마감은 10월 5일, 2차 평가 및 검증 마감은 10월 15일, 최종 결과 발표는 10월 16일, 오프라인 시상식은 11월 27일(예정)입니다. 공개 리더보드 1위는 팀 테드(점수 0.76006, 제출 4)입니다. 어제와 같은 팀·같은 점수이며, 오늘 본문의 핵심은 1위 교체가 아니라 과제 구조입니다. 딥보이스·블랙박스와 상금 카드 숫자는 같아도 과제가 다릅니다. 나라장터는 고정 LLM 위 추론 파이프라인과 근거 문구 정성평가가 붙어 있는 법령 모니터링 장입니다.

나머지 장은 한 줄만 둡니다. 딥보이스 참가자 909명(어제 대비 +20)·공개 1위 팀 55(총점 0.87364, 제출 22). 블랙박스 참가자 816명(+23)·공개 1위 팀 화난다고그렇게운전을하시면어떡해요(제출 46). 2026 AI 에너지전환 컨퍼런스 참가 카드 96명·마감. 월간 해커톤 csafcas API 기준 참가자 239명(+15)·제출 0건. 현재 단계는 참가 접수 및 팀 빌딩이며, 해당 단계 종료는 9월 14일 오전입니다. 아이디어 기획서 제출 단계는 9월 14일부터이며, 기획서 기한은 9월 28일 오전입니다. 총 상금은 100만 원입니다. DACON 코드 제출 대회와 DAKER 해커톤을 한 대회로 읽지 마십시오.

숫자와 과제 설명의 근거는 236754 개요·236754 리더보드, 한 줄 링크에 적은 각 공식 페이지, /api/hackathons/csafcas입니다. 표에 없는 미공개 값과 Private 리더보드 미공개 값은 넣지 않습니다. 나라장터 개요에서 확인한 과제·평가·일정만 앞에 두었습니다. 항목표·제출 zip 구조·채점 대기 안내는 공식 평가·규칙 탭에서 확인하시기 바랍니다. 내일 아침에도 같은 공식 페이지만으로 숫자를 다시 맞추겠습니다.

한 가지 더 짚습니다. 나라장터 장은 공개 리더보드 점수만으로 끝이 아닙니다. 근거 문구는 제공 원문의 부분문자열이어야 하며, 요약·수정·생성된 문구는 2차 자동 검증에서 무효가 될 수 있습니다. 부재탐지형 5개 항목(10·11·16·18·20번)은 있어야 할 기재가 없는 것이 위반이라 인용할 원문이 없어 정성평가 대상에서 제외됩니다. 이 규칙은 개요와 평가 안내에 적힌 내용입니다. 오늘 글은 그 구조를 먼저 읽고, 참가자 835명과 D-20은 배경으로만 둡니다.

나라장터 법령 위반 모니터링 과제
설명용 생성 이미지.