본문으로 건너뛰기

자율 AI agent의 행동을 관리하는 증명 가능한 규칙을 위한 시스템

인공지능(AI)代理가 인간의 대표로 중요한 행동을 수행하는 경우가 점점 더 많아지는데, 이 행동에는 금융 거래, 외부 커뮤니케이션, 기업 워크플로우 등이 포함된다. 현재代理기반 인프라는 식별 연합(ID federation)과 위임 인증(Authorized delegation)을 통해 로드의 인증과 자원 접근 제어를 수행하지만, 현재의 행동 및 운영 환경에서 허용된 행동을 결정할 수 없다. 우

AI 자동 생성
인공지능 기술이 발전함에 따라, 자율 인공지능 대리가 인간의 대리인으로 중요한 행동을 수행하는 경우가 점점 더 많아지고 있다. 이러한 행동에는 금융 거래, 외부 커뮤니케이션, 기업 워크플로우 등이 포함된다. 그러나 현재의 대리 기반 인프라는 연합과 위임 인증을 통해 로그인 인증과 자원 접근 제어를 수행하지만, 현재의 행동 및 운영 환경에서 허용된 행동을 결정할 수 없다.

에이전트바운드 시스템

우리는 에이전트바운드라는 실행 시점의 관리 프레임워크를 제시하는데, 이는 자율적인 인공지능 대리를 위한 검증 가능한 행동 관리를 제공한다. 에이전트바운드는 위임 인증, 소유자 서명 행동 헌장, 사이트 행동 계약 세 개의 독립된 권한을 통해 각 제안된 행동을 평가한다. 그들의 판단은 형식적인 의사 결정 모델을 통해 보수적으로 구성되어 행동이 허용되거나, 검토되거나, 거부되기 전에 결정된다. 에이전트바운드는 책임성을 제공하기 위해, 모든 행동을 정확한 위임, 정책 및 의미적인 도구에 대한 결정에 대한 바인딩으로 연결하는 암호적으로 검증 가능한 관리 수표를 생성한다. 프레임워크는 또한 장기적인 운영을 위해 지속적으로 새로고침된 관리 정책을 허용하는 지속적인 위임을 소개한다. 이는 연속적인 워크플로우가 운영될 수 있으면서도 취소 가능성과 제한된 권한을 유지할 수 있게 한다. 우리는 형식적인 기초, 시스템 아키텍처, 관리 수표 프로토콜, 그리고 에이전트바운드-벤치라는 관리 정확성, 권한 구성 및 책임성을 평가하는 벤치마크 프레임워크를 제시한다. 에이전트바운드는 권한 및 실행 사이에 결정적인 관리층을 제공하여, 관리를 믿을 수 있는 프로세스에서 독립적으로 검증할 수 있는 프로세스로 바꾸는 것이다. 이는 자율 인공지능 대리의 행동을 관리하는 데 있어 중요한 의미를 갖는다.
원문 보기 arXiv AI

함께 읽으면 좋은 기사

에이전트 17시간 전

Meta의 영감은 OpenAI와 Anthropic에서 본격적으로 빛나는 AI를 훔쳤습니다.

AI 리더들이 OpenAI와 Anthropic에서 "선도 경계를 맞춰가기"라는 주제로 논의를 시작했을 때, 누군가는 "어느 속도로?"라는 질문을 해야 했을 수도 있었다. 이제는 두 회사가 모두 모델을 출시하는 모델 출시 주간이 되었는데, Anthropic이 Opus 5.5을 출시한 후 OpenAI가 GPT-6 모델 업데이트를 90분만에 출시했다. 그러나 스포트라이트를 잡은 것은 Meta 였는

에이전트 2일 전

강화 학습 기반 역할 놀이 에이전트의 역할 학습을 위한 적대적 폐쇄 루프 교육과정

역할 연기하는 agent는 대규모 언어 모델을 기반으로 한 것들이 개인화된 지원 및 사회 시뮬레이션과 같은 분야에서 광범위하게 적용되어 왔다. 최근 RL 방법들은 학습이 시작되기 전에 미리 수집한 고정된 시나리오 풀에서 훈련을 받는다. 이로 인해 분포적 병목 현상이 발생한다: agent가 향상될수록 agent가 나쁜 성능을 보이는 시나리오도 변하고, 훈련 분포는 정적이다. 따라서, 우리는 역

관련 콘텐츠 더 보기

다른 플랫폼에서 이 주제에 대한 더 많은 정보를 확인하세요.