AI 에이전트가 사전 정의된 도구 없이 Remotion을 사용하여 자율적으로 비디오를 생성합니다

비디오 제작을 위한 자율 AI 에이전트 워크플로우

한 개발자가 계획, 코드 작성, 실행, 오류 처리, 완료까지 반복하는 다단계 작업을 자율적으로 수행하는 AI 에이전트를 실험했습니다. ChatGPT를 둘러싼 래퍼 에이전트들과 달리, 이 에이전트는 스캐폴딩이나 사전 정의된 도구 없이 작동합니다.

에이전트는 특정 주제에 대한 짧은 릴을 만들라는 목표를 받았습니다. 그것은 자율적으로:

• 비디오 렌더링 라이브러리가 필요하다고 판단했습니다
• Remotion을 도입했습니다
• 컴포지션 코드를 작성했습니다
• 여러 문제를 독립적으로 디버깅했습니다
• 렌더링된 비디오 파일을 전달했습니다

개발자는 이 과정에서 어떤 편집 도구도 열지 않았습니다.

향상된 자동완성을 넘어선 아키텍처 전환

중요한 측면은 결과물이 아니라 워크플로우 아키텍처였습니다. 현재 대부분의 AI 도구는 사용자가 프롬프트를 입력하면 AI가 제안하고 사용자가 실행하는 "향상된 자동완성" 단계에서 작동합니다. 이 에이전트는 다른 접근 방식을 보여주었습니다: 목표를 입력하면 결과물이 출력되며, 모든 중간 단계가 자율적으로 처리됩니다.

개발자는 에이전트가 작업 맥락에 따라 도구를 자체 선택하는 능력을 언급했으며, 워크플로우 전반에 걸쳐 일관성을 유지하는 페르소나 기반 에이전트와 이전에 반나절이 걸리던 연구 파이프라인에 에이전트를 사용하는 방향을 탐구하고 있다고 말했습니다.

현재 상태와 실패 모드

이 기술은 아직 초기 단계이며 다소 불안정할 수 있지만, 실패 모드는 가치 있는 통찰력을 제공합니다. 에이전트가 자신 있게 잘못된 길로 들어섰다가 스스로 수정하거나(또는 실패하는) 과정을 관찰함으로써 자율 AI 시스템의 실제 격차가 어디에 존재하는지 드러납니다.