ИИ-агент Автономно Создает Видео с Использованием Remotion Без Предопределенных Инструментов

Автономный рабочий процесс ИИ-агента для создания видео

Разработчик провёл эксперимент с ИИ-агентом, который автономно выполняет многоэтапные задачи — планирует, пишет код, запускает его, обрабатывает ошибки и повторяет цикл до завершения. В отличие от агентов, которые являются обёртками вокруг ChatGPT, этот работает без заранее заданных структур или инструментов.

Агенту была поставлена цель создать короткий ролик на заданную тему. Он автономно:

• Определил, что ему нужна библиотека для рендеринга видео
• Установил Remotion
• Написал код композиции
• Самостоятельно исправил несколько проблем
• Предоставил готовый видеофайл

Разработчик не открывал никаких инструментов редактирования в течение всего процесса.

Архитектурный сдвиг за рамки улучшенного автодополнения

Важным аспектом была не результат, а архитектура рабочего процесса. Большинство современных ИИ-инструментов работает в фазе «улучшенного автодополнения», где пользователи дают запрос, ИИ предлагает варианты, а пользователи выполняют. Этот агент продемонстрировал другой подход: цель на входе, результат на выходе, со всеми промежуточными шагами, выполняемыми автономно.

Разработчик отметил способность агента самостоятельно выбирать инструменты в зависимости от контекста задачи и упомянул о других направлениях исследований, включая агентов на основе персонажей, которые сохраняют согласованность в различных рабочих процессах, и использование агентов для исследовательских процессов, которые ранее занимали полдня.

Текущее состояние и режимы сбоев

Технология всё ещё находится на ранней стадии и может работать нестабильно, но режимы сбоев дают ценные сведения. Наблюдение за тем, как агент уверенно идёт по неверному пути и самостоятельно исправляет ошибки (или не может этого сделать), показывает, где существуют реальные пробелы в автономных ИИ-системах.