본문으로 건너뛰기

비판이 AI-assisted 이론 물리학을 개선할 때 언제? SCALAR: 구조화된 비판자-행동자 루프를 위한 의사결정적 사고

AI 지원 이론 물리학을 개선할 때 비판이 언제 작용할까? SCALAR: 구조화된 비판자-행동자 루프를 위한 의사결정적 사고 대규모 언어 모델(LLM)이 연구 수준 물리학적 사고 과제에서 점점 더 많은 가능성을 나타내고, 행동적 AI가 더 흔해지면서 실질적인 질문이 생긴다. 연구자와 에이전트 간의 상호작용이 결과에 어떤 영향을 미치는지 알아보자. 이를 위해 SCALAR(Structured Critic--Actor Loop for AI Reasoning)라는 Actor--Critic--Judge

AI 자동 생성

인공지능 지원 이론 물리학의 개선

대규모 언어 모델(LLM)이 연구 수준 물리학적 사고 과제에서 점점 더 많은 가능성을 나타내고, 행동적 인공지능이 더 흔해지면서 실질적인 질문이 생긴다. 연구자와 에이전트 간의 상호작용이 결과에 어떤 영향을 미치는지 알아보자. 이를 위해 구조화된 비평가-행동자 루프를 위한 Actor--비평가--심판 파이프라인을 양자장 이론과 끈 이론 문제에 적용했다.

행동자는 해결책을 제안하고, 비평가는 반복적인 피드백을 제공하며, 독립적인 심판관은 전적으로 해결책을 기준으로 전지록을 평가한다. 행동자 인격, 비평가 피드백 전략, 행동자 모델 가족 및 규모를 바꿔본다. 다중 턴 대화는 단일 시도보다 개선된다. 그러나 행동자-비평자 짝에 따라 개선의 메커니즘과 다른 프롬프트 선택의 가치가 강하게 의존한다.

비평의 역할과 효과

비평자 피드백 전략이 가장 분명하게 비대칭 행동자-비평자 설정에서 의미를 나타낸다. 이 경우 배열 피드백이 평균 점수 결과를 개선한다. 동일한 가족의 행동자-비평자 설정에서 전략 효과는 약하다: 관대한 피드백이 때때로 선호되며, 엄격하고 적대적인 피드백은 유익하지 않다. 구조화된 비평가-행동자 루프는 인공지능 지원 과학적 발견을 평가하기 위한 제어된 테스트베드로 제공한다.

결과적으로, 구조화된 비평가-행동자 루프는 인공지능 지원 이론 물리학을 개선하는 데 있어 비평의 역할과 효과를 평가하는 데 유용한 도구가 될 수 있다. 이를 통해 연구자들은 행동자와 비평자 간의 상호작용을 더 잘 이해하고, 더 효율적인 피드백 전략을 개발하여 연구 결과를 개선할 수 있다.

원문 보기 arXiv AI

함께 읽으면 좋은 기사

에이전트 18시간 전

Meta의 영감은 OpenAI와 Anthropic에서 본격적으로 빛나는 AI를 훔쳤습니다.

AI 리더들이 OpenAI와 Anthropic에서 "선도 경계를 맞춰가기"라는 주제로 논의를 시작했을 때, 누군가는 "어느 속도로?"라는 질문을 해야 했을 수도 있었다. 이제는 두 회사가 모두 모델을 출시하는 모델 출시 주간이 되었는데, Anthropic이 Opus 5.5을 출시한 후 OpenAI가 GPT-6 모델 업데이트를 90분만에 출시했다. 그러나 스포트라이트를 잡은 것은 Meta 였는

에이전트 2일 전

강화 학습 기반 역할 놀이 에이전트의 역할 학습을 위한 적대적 폐쇄 루프 교육과정

역할 연기하는 agent는 대규모 언어 모델을 기반으로 한 것들이 개인화된 지원 및 사회 시뮬레이션과 같은 분야에서 광범위하게 적용되어 왔다. 최근 RL 방법들은 학습이 시작되기 전에 미리 수집한 고정된 시나리오 풀에서 훈련을 받는다. 이로 인해 분포적 병목 현상이 발생한다: agent가 향상될수록 agent가 나쁜 성능을 보이는 시나리오도 변하고, 훈련 분포는 정적이다. 따라서, 우리는 역

관련 콘텐츠 더 보기

다른 플랫폼에서 이 주제에 대한 더 많은 정보를 확인하세요.