본문으로 건너뛰기

offline 에이전트 정렬을 위한 이뭄레이션 학습을 위한 피드백 조작 규제

강화 학습(RL) 연구는 점점 더 인간 가치에 부합하는 행동을 배우도록 보장하는 동맹에 초점을 맞추고 있습니다. 인간의 시범과 피드백은 동맹에 중요했지만, 언어 생성에 대한 문맥적 밴디트 프레임을 위한 다단계 pipe라인을 주로结合하여 동맹을 위한 기존 접근법은 주로 인간의 시범과 피드백을结合합니다. 그러나 이러한 보완적인 입력들이 단일 단계 오프라인 학습을 위한 더 풍부하고 상호 연결된 신

AI 자동 생성

인간 가치에 맞는 행동을 배우는 강화 학습

강화 학습 연구는 점점 더 인간 가치에 맞는 행동을 배우도록 보장하는 동맹에 초점을 맞추고 있습니다. 인간의 시범과 피드백은 동맹에 중요했지만, 언어 생성에 대한 상황적 탐색 프레임을 위한 다단계 파이프라인을 주로 결합하여 동맹을 위한 기존 접근법은 주로 인간의 시범과 피드백을 결합합니다. 이러한 보완적인 입력들은 단일 단계 오프라인 학습을 위한 더 풍부하고 상호 연결된 신호로 작용할 수 있습니다. 강화 학습에서 동맹을 개선하기 위해 평가적 피드백을 보정 신호로 활용하는 알고리즘에 무관한 방법인 피드백 조작 규제를 제안했습니다. 피드백 조작 규제는 시범 학습 정책의 동맹을 개선하기 위해 설계되었으며, 안전 체육관 환경을 적용시켜 테스트했습니다. 결과적으로 시범 학습 알고리즘의 범위 내에서 개선된 적합성과 동맹 불일치의 98% 감소를 보여주었습니다. 피드백 조작 규제는 제한된 데이터 환경에서 여전히 견고함을 유지하며, 가치가 없는 노이즈가 있는 희박한 동맹 시범에서 학습할 수 있습니다. 이는 강화 학습에서 동맹을 개선하기 위한 새로운 접근법을 제공하며, 인간 가치에 맞는 행동을 배우는 데 중요한 역할을 할 수 있습니다. 또한 피드백 조작 규제는 다른 분야에서도 적용될 수 있으며, 더 나은 성능과 안정성을 제공할 수 있습니다. 따라서 피드백 조작 규제는 강화 학습과 관련된 연구에서 중요한 역할을 할 수 있습니다.
원문 보기 arXiv AI

함께 읽으면 좋은 기사

LLM PC 3일 전

미소프트가 퀄컴의 X2 플러스 칩을 탑재한 더 작은 서피스 프로와 랩톱을 새로 출시합니다.

마이크로소프트는 퀄컴의 최신 스냅드龍 X2 플러스 칩을 사용하여 Surface Pro 12인치와 Surface Laptop 13인치를 업데이트한다. 작은 Surface 기기는 이전 해와 같은 디자인과 하드웨어 기능을 유지하며 내부에 더 빠르고 강력한 칩을 탑재하고 가격도 더 높아졌다(램 가격 상승으로 인해!). 12인치 Surface Pro는 $799.99에서 시작했지만(…)

LLM PC 4일 전

수류봇 시뮬레이션용 디바이스 내시각적 증거融合 및 설명 가능한 안내: PAANI

아르키브 : 2609.22353v1 발표 유형 : 새로운 요약 : 이동河川監視 로봇은 지리적 경계점만으로는 설명할 수 없는 장애물과 물의 경계를 해석해야 합니다. 자원 제한된 플랫폼에서는 불완전한 시각적 예측을 신속하고 검토 가능한 지침으로 변환하는 것이 DISTINCT한 문제입니다. 오브젝트 레이블이나 스티어링 명령은 어떤 증거가 결정을 지원하는지 또는 그 증거가 불신할 때를 설명하지 않습

LLM PC 9월 17일

지오AI를 위한 지식형 언어 모델(LLM) 지원 GIS에 대한 윤리적 및 개인정보 보호 위험에 대한 서술적 검토: 자율 GIS를 위한 통치 aware GIS의 방향

지오스페이셜 인공지능(GeoAI)은 대규모 언어 모델(LLM)으로 구동되는 자연어 인터페이스와 자율 GIS 워크플로를 통해 공간 정보에 대한 쿼리, 생성 및 해석 능력을 확장하고 있다. 이러한 기능은 일반적인 인공지능 윤리 논의에서 다루지 못하는 정부에 대한 새로운 도전을 제기한다. 이는 이동성 추적에서 수동 위치 추론, 공간적으로 구조화된 편견의 증폭, 공간적 자율성의 증폭, 다중 모드 지

LLM PC 9월 11일

규모에 따른 중요한 물질 회수에 집중한 능동 학습

연구자들은 대규모 생산을 위해 회복 과정의 선택을 위해 실험실 결과와 제품 요구 사항, 공정 비용, 규모 효과를 연결하는 것이 필요하다. 우리는 퍼시픽 노스웨스트 국립 연구소의 컴퓨터 인텔리전스(CICERO) 워크플로우에서 자율적인 선택적 침전을 위한 기록을 분석했다. 활성 학습은 이전 결과를 사용하여 실험이 선택된다. 조건부 역사적 벤치마크에서 모델과 재활용된 네오디뮴-철-보르온(NdFeB

LLM PC 9월 11일

온라인 에이전트를 위한 상태-경로 도구 메뉴: 메뉴는 이전의 처형이다.

인공지능 언어 모델은 도구를 통해 작동하지만 실제 agent는 수천 개의 인터페이스를 포함하는 라이브러리를 처리해야 한다. 우리는 agent에게 실행하기 전에 보여지는 도구 메뉴를 도구의 짧은 순서付き 부분집합으로 정의한다. agent는 이 메뉴에 있는 도구만 호출할 수 있다. 다단계 작업은 최종 작업과 그 작업의 입력을 생성하는 이전 도구가 사용 가능한 순서로 작동한다. 현재 생성기는 요청

LLM PC 9월 11일

subagent 대 agent skill: 재사용 가능한 지식의 재현을 통한 장기적 행위任务의 수행

인공지능-agent가 대규모 언어 모델(LLM)에서 재사용 가능한 지식 라이브러리를 효과적으로 활용하여 장거리 작업을 해결하는 방법은 무엇입니까? 최근 연구는 agent skills: 재사용 가능한 기능을 나타내는 패키지로, 즉 특정 작업을 수행하는 데 도움이 되는 지침, 스크립트 및 기타 자원들이 포함된 다중 파일 묶음에 집중하고 있습니다. agent skills는 일반적으로 skill i

관련 콘텐츠 더 보기

다른 플랫폼에서 이 주제에 대한 더 많은 정보를 확인하세요.