Проект автоисследований Карпати: ИИ-агенты проводят ночные эксперименты по обучению LLM.
Что делает проект автоисследований Карпати
Андрей Карпати выпустил небольшой репозиторий под названием "autoresearch", который демонстрирует концепцию "ИИ-исследователь в цикле". Система использует ИИ-агента для автономного запуска экспериментов по обучению LLM в течение ночи на одном GPU.
Как это работает
Агент следует такому рабочему процессу:
- Постоянно редактирует файл
train.py - Запускает 5-минутные эксперименты по обучению nanochat
- Проверяет, улучшился ли показатель валидации битов на байт (
val_bpb) - Повторяет этот цикл, пока вы спите
Настройка и конфигурация
Проект имеет очень минимальную настройку:
- Оборудование: Один GPU
- Файлы: Один основной файл
- Метрики: Одна основная метрика (
val_bpb)
Человек пишет промпт организации исследования в program.md, а агент управляет итерацией кода.
Пропускная способность экспериментов
С фиксированным бюджетом в 5 минут на эксперимент система может запускать примерно 12 экспериментов в час.
Этот подход демонстрирует практическую реализацию автоматизированных исследований, где ИИ-агенты могут автономно исследовать пространства параметров и конфигурации обучения, потенциально ускоряя циклы экспериментов для разработчиков, работающих с языковыми моделями.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
Forge: IDE на основе Claude с автоматической проверкой и ДНК проекта
Forge — это IDE на основе Claude, построенная на VS Code, которая автоматически запускает проверку типов, тесты, проверку покрытия и валидацию импортов перед показом кода. Она включает циклы самовосстановления при неудачной верификации и строит «ДНК проекта» паттернов вашей кодовой базы.
Пользователи OpenClaw сообщают о проблемах с планированием и проверкой при использовании ИИ-агентов.
Пользователи OpenClaw описывают процессы планирования и проверки как 'похожие на MS-DOS', несмотря на эффективную генерацию кода, ссылаясь на необходимость ручного вмешательства, фрагментацию документов и потерю логики при совместной работе агентов. Некоторые экспериментируют с редакторами документов, созданными специально для агентов, такими как comment.io и Proof by Every.
ВОСТОРГ: Локальный Оркестратор Использует Несколько Сессий ChatGPT в Качестве Скоординированных Агентов
DELIGHT — это локальный оркестратор, который одновременно запускает несколько скрытых сессий ChatGPT в браузере, координируя их как команду агентов, без необходимости в API-ключах или GPU-ресурсах. Он подключается к OpenClaw в качестве слоя действий для внесения изменений в реальные файлы и запуска тестов.
LivingAgents.ai: Веб-симуляция ИИ-агентов на основе Claude API
LivingAgents.ai — это веб-симуляция, в которой каждый агент работает на основе API Claude, выполняя действия, такие как поиск ресурсов, торговля, создание предметов, атаки, размножение и постоянная смерть, причём каждое действие требует реального вызова LLM.