본문으로 건너뛰기

에지에서 작동하는 임베디드 AI agent 시스템을 위한 모듈식 아키텍처 방향

대규모 언어 모델(LLM)의 발전으로 인해 복잡한 추론과 도구 사용이 가능한 인공지능이 가능해졌지만, 퍼지 컴퓨팅 환경에서 이러한 자율성을 배포하는 것은 임베디드 마이크로컨트롤러의 엄격한 메모리와 에너지 제약으로 인해 어려움을 겪고 있습니다. 기존의 프레임워크는 일반적으로 서버급 자원이나 지속적인 연결성을 가정하기 때문에, 심층 임베디드 시스템을 위한_gap이 남아 있습니다. 이 논문은 결정

AI 자동 생성

에지에서 작동하는 임베디드 AI agent 시스템

대규모 언어 모델(LLM)의 발전으로 인해 복잡한 추론과 도구 사용이 가능한 인공지능이 가능해졌지만, 퍼지 컴퓨팅 환경에서 이러한 자율성을 배포하는 것은 임베디드 마이크로컨트롤러의 엄격한 메모리와 에너지 제약으로 인해 어려움을 겪고 있습니다. 기존의 프레임워크는 일반적으로 서버급 자원이나 지속적인 연결성을 가정하기 때문에, 심층 임베디드 시스템을 위한 격차가 남아 있습니다. 따라서, 결정 에지에서 작동하는 임베디드 AI agent 시스템을 위한 새로운 아키텍처 방향이 필요합니다.

이 논문은 결정론적 실시간 제어와 자율적 지능의 중간 지점을 채우는 임베디드 에이전트 시스템을 위한 모듈식 참조 아키텍처를 제안합니다. 저자는 On-Device Agents와 클라우드에 증강된 에이전트를 분리하는 다층 디자인을 도입했습니다. 클라우드에 증강된 에이전트는 작은 언어 모델(SLM)을 사용하여 더 높은 수준의 추론과 계획을 수행합니다.

Governance Layer와 분산된 자율 장치

이 논문의 주요 기여는 분산된 자율 장치들의 분산된 함대에 걸쳐 관찰성, 정책 강제, 및 안전을 보장하는 횡단적인 Governance Layer를 통합하는 것입니다. 이 논문은 주로 경험적인 Benchmarks를 제시하는 대신, 아키텍처 디자인 원칙 및 latency, energy, 및 신뢰성 있는 실행과 관련된 trade-offs를 분석합니다. 이러한 접근은 에지에서 작동하는 임베디드 AI agent 시스템을 위한 새로운 아키텍처 방향을 제공하며, 퍼지 컴퓨팅 환경에서 자율성을 배포하는 데 도움이 될 수 있습니다.

이러한 모듈식 아키텍처 방향은 대규모 언어 모델(LLM)과 임베디드 시스템의 결합으로 인해 발생하는 새로운 기회와 도전을 다루는 데 도움이 될 수 있습니다. 에지에서 작동하는 임베디드 AI agent 시스템은 다양한 산업과 애플리케이션에서 활용될 수 있으며, 이 논문의 제안은 이러한 시스템의 개발과 배포를 위한 중요한 단계가 될 수 있습니다.

원문 보기 arXiv AI

함께 읽으면 좋은 기사

에이전트 17시간 전

Meta의 영감은 OpenAI와 Anthropic에서 본격적으로 빛나는 AI를 훔쳤습니다.

AI 리더들이 OpenAI와 Anthropic에서 "선도 경계를 맞춰가기"라는 주제로 논의를 시작했을 때, 누군가는 "어느 속도로?"라는 질문을 해야 했을 수도 있었다. 이제는 두 회사가 모두 모델을 출시하는 모델 출시 주간이 되었는데, Anthropic이 Opus 5.5을 출시한 후 OpenAI가 GPT-6 모델 업데이트를 90분만에 출시했다. 그러나 스포트라이트를 잡은 것은 Meta 였는

에이전트 2일 전

강화 학습 기반 역할 놀이 에이전트의 역할 학습을 위한 적대적 폐쇄 루프 교육과정

역할 연기하는 agent는 대규모 언어 모델을 기반으로 한 것들이 개인화된 지원 및 사회 시뮬레이션과 같은 분야에서 광범위하게 적용되어 왔다. 최근 RL 방법들은 학습이 시작되기 전에 미리 수집한 고정된 시나리오 풀에서 훈련을 받는다. 이로 인해 분포적 병목 현상이 발생한다: agent가 향상될수록 agent가 나쁜 성능을 보이는 시나리오도 변하고, 훈련 분포는 정적이다. 따라서, 우리는 역

관련 콘텐츠 더 보기

다른 플랫폼에서 이 주제에 대한 더 많은 정보를 확인하세요.