KAOJKorea AI Online Judge

이용 안내

Korea AI Online Judge

AI를 내 의도대로 움직이게 하세요.

KAOJ(카오제이)는 시스템 프롬프트를 제출해 실제 업무형 입력을 풀고, 결과를 검증하는 온라인 저지입니다.

01
문제 해결
02
결과 검증
03
비용 최적화

먼저 첫걸음, 그다음 탐험

첫걸음 코스 12문제에서 프롬프트 작성과 출력 형식을 익힙니다. 모든 테스트가 공개되며 90점 이상이면 통과합니다. 탐험 문제 4001~4003은 한 줄의 목표와 공개 예제 8개로 시작합니다.

  1. 로그인하고 중복되지 않는 닉네임을 정합니다.
  2. 예제를 읽거나 전체 복사해 LLM에게 분석을 요청합니다. 사이트 안의 분석 채팅은 아직 제공하지 않습니다.
  3. 모델과 프롬프트를 정하고 공개 예제로 연습합니다. 연습은 도전 횟수나 순위에 영향을 주지 않습니다.
  4. 새 도전을 시작합니다. 한 도전 안에서는 같은 모델과 언어로 평가합니다.

답할 것인가, 보류할 것인가

답은 {"answer":값}, 보류는 {"answer":null}로 출력합니다. 정보가 부족하거나 답을 하나로 확정할 수 없는 사례는 보류해야 정답입니다. 답을 낼 수 있는 사례도 자신 없으면 보류할 수 있습니다.

오답이나 출력 형식 오류가 1건이라도 나오면 즉시 도전 실패입니다. 보류는 실패가 아니지만 사람이 검토할 비용이 붙습니다. 필수 보류는 올바른 판단으로 기록하되 자동 처리율에는 넣지 않습니다.

계속 도전하거나, 지금 확정하기

매회 새로운 12건을 평가하며 최대 5회 도전합니다. 오답이 없으면 보류한 입력을 살펴보고 프롬프트를 수정해 다음 회차로 가거나, 현재 기록을 확정해 순위에 올릴 수 있습니다. 다음 회차에 진입하면 이전 회차로 돌아갈 수 없습니다. 실패하면 이번 도전의 미확정 기록을 잃고 1회차부터 다시 시작합니다. 이전에 확정한 별도 도전 기록은 유지됩니다.

점수와 입력 1,000건당 비용

총처리비용 = AI 비용 + 보류율 × 1,000 × $0.10. 보류 비용은 게임용 가정이며 실제 청구가 아닙니다. 점수는 전부 사람이 검토하는 $100 대비 절감률(0~100점)입니다. 현재 회차로 계산하며, 전부 보류해도 실패하지 않지만 0점입니다.

비용은 이번 테스트와 비슷한 길이의 입력 1,000건을 처리하는 경우로 환산합니다. 순위용 AI 비용은 캐시 할인 없는 고정 단가로 비교합니다. 실제 API 원가는 연습과 실패를 포함해 별도로 기록합니다.

같은 문제·언어에서 사용자당 최고 기록 1개. 정확도(탐험은 확정한 기록의 자동 처리율), 입력 1,000건당 API 원가, 출력 토큰 순입니다. 전체 모델을 통합하거나 모델별로 볼 수 있습니다.

실패 이유와 공개 범위

보류 분석에는 본인이 보류한 입력과 응답을 공개하고 정답은 숨깁니다. 오답으로 실패하면 첫 오답의 입력·모델 응답·기대 정답·계산 또는 판단 근거를 확인할 수 있습니다. 자동으로 맞힌 비공개 입력은 공개하지 않습니다. 프롬프트는 본인과 권한이 있는 관리자만, 비공개 채점 데이터 전체는 관리자만 볼 수 있습니다.

언어와 실행 정책

첫걸음과 현재 탐험 문제는 선택한 언어의 입력만 사용합니다. 언어별로 순위를 비교합니다.

탐험 도전에서는 본인이 보류한 입력과 실패한 판단의 근거를 확인할 수 있습니다. API 오류는 도전 실패입니다.

불러오는 중…

페이지를 닫으면 후속 평가가 멈추며 기록에서 이어갈 수 있습니다. 응답 없는 호출은 5분 후 실패 처리하고 자동 재과금 호출하지 않습니다.

  • GPT-4.1 nano · 무료 · temperature 0 / top_p 1 / max 1,024 tokens
  • GPT-4.1 mini · 무료 · temperature 0 / top_p 1 / max 1,024 tokens
  • GPT-4.1 · 유료 · 준비 중 · temperature 0 / top_p 1 / max 1,024 tokens
  • Gemini 3.5 Flash-Lite · 무료 · temperature 0 / top_p 1 / max 1,024 tokens
  • Claude Sonnet 4.6 · 무료 · temperature 0 / top_p 1 / max 1,024 tokens
  • Kimi K2.5 · 무료 · temperature 0 / top_p 1 / max 1,024 tokens
credit_cost = (generation_cost + judge_cost) × 2

현재 결제·차감은 없습니다. 금액은 USD입니다.