본문으로 건너뛰기

행위적 인공지능 시스템의 런타임 관리를 위한 의무적 정책

AI 자동 생성

자율적이고 주체적인 AI 시스템은 대규모 언어 모델(LLM)에 의해 구동되며 새로운 보안, 개인정보 보호 및 준수성 문제를 도입한다. 이러한.agent가 도구를 호출할 수 있고 데이터를 조작할 수 있고 소프트웨어를 설치할 수 있고 조직간 경계를 넘어 peer agent들과 협력할 수 있기 때문에, 인증 및 접근 제어만으로는 충분하지 않다. 대신, 이 agent가 허용되거나 금지되는 것이 무엇인지, 특정 행위 후에 수행해야 하는 의무가 무엇인지, 어떤 조건하에 의무가 면제될 수 있는지, 그리고 정책 간 충돌이 발생했을 때 우선순위를 정하는 규칙이 무엇인지 등에 대한 전체적인 기업 관리 구조를 정의해야 한다. 이 관리 문제는 현재 정책 엔진이 제공하는 것보다 훨씬 더 복잡하다. XACML, Rego, Cedar과 같은 시스템은 이 관리 구조의 허용/금지 부분만을 다루며, 의무의 생애주기 관리, 메타 정책 충돌 해결, 특정 상황에서 의무를 면제하는 허가, 도메인 클래스 계층 구조에서 흔히 발견되는 데이터 개인 정보 보호, 보안, 건강 관리와 같은 응용 프로그램에서 ontological reasoning을 제공하지 않는다. 우리는 AgenticRei를 제안한다. AgenticRei는 의무, 허가, 정책 충돌 해결, 그리고 정책에 대한 논리적 추론을 포함한 기본적인 허용/금지 제약을 포함한 주요 관리 요구 사항을 실현한다. 우리는 Rei framework에 기반을 둔 deontic 정책 언어를 사용하여 OWL(웹 온톨로지 언어)로 표현하고 런타임 시 고성능 로직 엔진에 의해 평가된다. 이 엔진은 LLM 외부에 위치한다. 이 pipeline은 agent가 도구를 호출하는 것과 agent-to-agent message를 처리하는 것 모두에 적용된다. 예시를 통해 우리는 deontic 정책이 현재 생산 엔진에서 표현할 수 없는 보안 및 개인 정보 보호에 대한 관리 제약을 캡처한다는 것을 보여준다. 또한, 우리의 접근 방식은 A2AS와 같은 산업 표준 프레임워크와 자연스럽게 구성된다.

원문 보기 arXiv AI

함께 읽으면 좋은 기사

에이전트 17시간 전

Meta의 영감은 OpenAI와 Anthropic에서 본격적으로 빛나는 AI를 훔쳤습니다.

AI 리더들이 OpenAI와 Anthropic에서 "선도 경계를 맞춰가기"라는 주제로 논의를 시작했을 때, 누군가는 "어느 속도로?"라는 질문을 해야 했을 수도 있었다. 이제는 두 회사가 모두 모델을 출시하는 모델 출시 주간이 되었는데, Anthropic이 Opus 5.5을 출시한 후 OpenAI가 GPT-6 모델 업데이트를 90분만에 출시했다. 그러나 스포트라이트를 잡은 것은 Meta 였는

에이전트 2일 전

강화 학습 기반 역할 놀이 에이전트의 역할 학습을 위한 적대적 폐쇄 루프 교육과정

역할 연기하는 agent는 대규모 언어 모델을 기반으로 한 것들이 개인화된 지원 및 사회 시뮬레이션과 같은 분야에서 광범위하게 적용되어 왔다. 최근 RL 방법들은 학습이 시작되기 전에 미리 수집한 고정된 시나리오 풀에서 훈련을 받는다. 이로 인해 분포적 병목 현상이 발생한다: agent가 향상될수록 agent가 나쁜 성능을 보이는 시나리오도 변하고, 훈련 분포는 정적이다. 따라서, 우리는 역

관련 콘텐츠 더 보기

다른 플랫폼에서 이 주제에 대한 더 많은 정보를 확인하세요.