한 줄 요약

OpenAI가 제공사에 종속되지 않는 멀티 에이전트용 Python 프레임워크를 공개했고, 두 논문은 멀티모달 세계 추론과 적은 관측에서의 3D 관절 구조 파악 능력을 점검한다.

Open Source & Repos

OpenAI Agents SDK (Python): 멀티 에이전트 워크플로 프레임워크

여러 개의 AI 에이전트가 함께 복잡한 작업을 수행하도록 만드는 가벼운 프레임워크다. OpenAI의 Responses와 Chat Completions 응용 프로그램 인터페이스(API)뿐 아니라 100개가 넘는 대형 언어 모델(LLM)과 동작하도록 설계되어, 특정 모델 공급사에 묶이지 않는다. ¹

핵심 개념은 지시문·도구·가드레일·업무 이양으로 구성된 에이전트, 장시간 작업을 컨테이너에서 실행하도록 미리 구성된 샌드박스 에이전트, 실시간 상호작용을 위한 리얼타임 에이전트다. 저장소에는 이러한 패턴을 설명하는 Agents, Sandbox agents 문서와 추적 UI 예시가 포함되어 있다. ¹

프로젝트는 v0.22.3 버전으로 업데이트되었고, 도구 인자 검증과 조건부 승인 정렬, 서버 관리 재개 시 ‘tool‑not‑found’ 출력을 명확히 하는 등 수정 사항이 기록되었다. Python 외 환경을 위한 JavaScript/TypeScript 버전도 연결되어 있다. ¹

의의: 제공사에 구애받지 않는 멀티 에이전트 오케스트레이션과 도구 사용을 표준화해, 팀이 이종 모델을 비교·프로토타입할 때 접착 코드 재작성 부담을 줄이고 다중 모델 전략의 전환 비용을 낮춘다. ¹

Research Papers

MiniMax-H3: 물리 세계 추론 평가

텍스트·이미지·비디오·오디오를 함께 다루는 옴니 모달(Omni‑Modal) 생성 모델이 실제 사건과 물리적 역학을 더 잘 추론하는지 평가한다. 프레임과 짝지은 암시적 프롬프트, 오디오‑이미지, 프리픽스 비디오, 오디오‑비디오 등 네 가지 부분 증거 시나리오에서 총 517개 사례를 구성했으며, MiniMax‑H3의 전체 성공률은 41.97%다. 그중 비디오 기반 의사결정 추론 56.00%로 가장 높고, 오디오 기반 모호성 해소는 27.40%로 가장 낮았다. ²

결과는 멀티모달 정렬이 도움이 되지만 불균일하다는 점을 보여 주며, 다중 모달 입력을 동시에 처리하는 모델에 맞춘 새로운 평가 구성을 제안한다. ²

FAMOS: 적은 관측으로 3D 관절 구조 예측

FAMOS는 몇 개의 희소하고 순서 없는 3차원(3D) 포인트클라우드 관측만으로 물체의 어느 부위가 움직이고 관절이 어떻게 구성되는지 예측하는 피드포워드 방식 시스템이다. 관측 간 움직임 단서를 통합하는 멀티‑스테이트 아티큘레이션 트랜스포머와, 입력 관측에서 나타난 각 부위의 움직임 범위를 감독하는 ‘아티큘레이션 스팬’ 목표를 도입해 테스트 시점의 무거운 최적화를 피한다. ³

PartNet‑Mobility, ACD, ArtiCraft‑10K에서 피드포워드·최적화 기반 기준선 모두 대비 일관된 성능 향상을 보고하며, 제한된 부분 관측을 엮어도 신뢰할 수 있는 부품 분할과 관절 파라미터를 복원할 수 있음을 보여 준다. ³

왜 중요한가

에이전트 워크플로는 임시 스크립트에서 공용 인프라로 이동하고 있다. 도구·가드레일·업무 이양·샌드박싱 같은 패턴을 내장한 제공사 무관 프레임워크는 통합 비용을 줄이고 다중 모델 구성을 실용적으로 만든다. ¹

동시에 MiniMax‑H3와 FAMOS는 ‘세계 모델’의 현재 위치를 드러낸다. 오디오‑비주얼 통합은 모호성 해소 과제에서 여전히 격차를 보이고, 희소한 3D 관측만으로 역학을 추정하는 능력은 새 아키텍처로 점진적으로 개선되고 있다. 이는 오디오 비중이 큰 기능의 범위를 신중히 설정하고 지각 파이프라인을 기획하는 데 참고가 된다. ^{2 3}

이번 주 시도해볼 것

1. 두 에이전트 핸드오프 만들어보기: “pip install openai‑agents”로 설치 후 README의 퀵스타트를 실행해 한 에이전트가 도구를 호출하고 결과를 다른 에이전트에 넘기도록 구성한다.
2. MiniMax‑H3 논문의 결과 표 훑어보기: 어떤 모달 조합에서 추론 성능이 올라가거나 제한되는지 비교한다.