본문으로 건너뛰기

그랜드코드: 컴퓨터 프로그래밍 경쟁에서 대마스터 수준 달성하기 위한 대인 강화 학습

컴퓨터 프로그래밍 경쟁에서 아직까지 AI가 인간을 능가하지 못하는 마지막 몇 가지 분야 중 하나입니다. 그 중 가장 최근의 결과, 구글의 Gemini~3 Deep Think은 8위에 오르지만 실시간 경쟁 조건 하에 평가되지 않았습니다. 이 연구에서 우리는 컴퓨터 프로그래밍 경쟁을 위한 대인 강화 학습 시스템인 그랜드코드를 소개합니다. 그랜드코드의 능력은 두 가지 주요 요인에 기인합니다: (1) 가정적인 모듈(가설 제안, 해결책, 테스트 생성, 요약 등)을 조정하고 그들을 공동으로 향상시키는 후 교육 및 실시간 테스트 시간 강화 학습; (2) 가정적인 GRPO를 소개합니다. 멀티 스테이지 에이전트 롤아웃에 지연된 보상을 위한 특수하게 설계되었습니다. 그랜드코드는 실시간 경쟁에서 인간 참가자들을 모두 능가하는 최초의 AI 시스템입니다. Codeforces의 최근 세 라운드(1087, 1088, 1089)에서 그랜드코드는 모두 1위를 차지했습니다.

AI 자동 생성

컴퓨터 프로그래밍 경쟁은 아직까지 AI가 인간을 능가하지 못하는 마지막 몇 가지 분야 중 하나입니다. 그 중 가장 최근의 결과, 구글의 Gemini~3 Deep Think은 8위에 오르지만 실시간 경쟁 조건 하에 평가되지 않았습니다. 이 연구에서 우리는 컴퓨터 프로그래밍 경쟁을 위한 대인 강화 학습 시스템인 그랜드코드를 소개합니다.

그랜드코드의 능력은 두 가지 주요 요인에 기인합니다:

  • 가정적인 모듈(가설 제안, 해결책, 테스트 생성, 요약 등)을 조정하고 그들을 공동으로 향상시키는 후 교육 및 실시간 테스트 시간 강화 학습;
  • 가정적인 GRPO를 소개합니다. 멀티 스테이지 에이전트 롤아웃에 지연된 보상을 위한 특수하게 설계되었습니다.

그랜드코드는 실시간 경쟁에서 인간 참가자들을 모두 능가하는 최초의 AI 시스템입니다. Codeforces의 최근 세 라운드(1087, 1088, 1089)에서 그랜드코드는 모두 1위를 차지했습니다.

원문 보기 arXiv AI

함께 읽으면 좋은 기사

에이전트 17시간 전

Meta의 영감은 OpenAI와 Anthropic에서 본격적으로 빛나는 AI를 훔쳤습니다.

AI 리더들이 OpenAI와 Anthropic에서 "선도 경계를 맞춰가기"라는 주제로 논의를 시작했을 때, 누군가는 "어느 속도로?"라는 질문을 해야 했을 수도 있었다. 이제는 두 회사가 모두 모델을 출시하는 모델 출시 주간이 되었는데, Anthropic이 Opus 5.5을 출시한 후 OpenAI가 GPT-6 모델 업데이트를 90분만에 출시했다. 그러나 스포트라이트를 잡은 것은 Meta 였는

에이전트 2일 전

강화 학습 기반 역할 놀이 에이전트의 역할 학습을 위한 적대적 폐쇄 루프 교육과정

역할 연기하는 agent는 대규모 언어 모델을 기반으로 한 것들이 개인화된 지원 및 사회 시뮬레이션과 같은 분야에서 광범위하게 적용되어 왔다. 최근 RL 방법들은 학습이 시작되기 전에 미리 수집한 고정된 시나리오 풀에서 훈련을 받는다. 이로 인해 분포적 병목 현상이 발생한다: agent가 향상될수록 agent가 나쁜 성능을 보이는 시나리오도 변하고, 훈련 분포는 정적이다. 따라서, 우리는 역

관련 콘텐츠 더 보기

다른 플랫폼에서 이 주제에 대한 더 많은 정보를 확인하세요.