Обзор производительности Omnicoder-9B: Скорость против проблем с вызовом инструментов

Технический обзор
Omnicoder-9B — это модель, специализированная на программировании, разработанная Tesslate на основе архитектуры Qwen 3.5. Она дообучена поверх Qwen3.5 9B с использованием выводов нескольких моделей, включая Opus 4.6, GPT 5.4, GPT 5.3 Codex и Gemini 3.1 Pro.
Характеристики производительности
Модель демонстрирует высокую производительность на оборудовании среднего уровня. При 12 ГБ видеопамяти пользователи сообщают о стабильной генерации токенов со скоростью 15 токенов/сек даже при размере контекста в 100 тыс. Обработка промптов заметно быстрая — примерно 265 токенов/сек. Модель работает без сбоев системы или ухудшения производительности.
Ограничения и проблемы
Несмотря на преимущества в скорости, Omnicoder-9B показывает несколько ограничений в практических сценариях программирования:
- Не удалось сгенерировать полный клон Super Mario в отдельном HTML-файле с помощью однократного промпта
- Возникали сбои при вызове инструментов с серверами MCP, генерируя ошибки MCP во время получения данных
- Проблемы с выполнением вызовов инструментов записи из Claude Code, хотя это может быть связано с факторами совместимости
Тестирование интеграции с IDE
Тестирование в средах разработки показало неоднозначные результаты:
- В LM Studio с Roo Code: происходили разрывы соединения при увеличении размера токенов до 4 тыс., хотя это, по-видимому, проблема интеграции, а не самой модели
- Модель успешно обновляла или записывала небольшие скрипты с размером токенов от 2 до 3 тыс.
- API-запросы завершались неудачей для токенов свыше 4 тыс. без сообщений об ошибках
- В Claude Code: генерация токенов ощущалась медленнее по сравнению с Roo Code, и модель не смогла выполнить вызовы инструментов записи после генерации вывода
Пользователь отмечает, что Roo Code оказался наиболее эффективным расширением для локальных LLM среди протестированных вариантов, включая Continue.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также

Код Клода использовался для симуляции более 4000 игр в "Мафию" с использованием языковых моделей
Разработчик использовал Claude Code для создания симулятора, в котором большие языковые модели играют в слепую версию игры «Одной ночью: Оборотень», проведя около 4600 игр с моделями от OpenAI и xAI. Эксперимент выявил устойчивые паттерны голосования на основе имён, несмотря на минимальные игровые сигналы.

Открытый крючок оценки доверия для Claude Code отслеживает сессии и блокирует защищённые пути
Разработчик создал Python-хук, который оценивает каждую сессию Claude Code по параметрам надежности, охвата и стоимости, блокирует доступ к защищенным путям, таким как .env файлы, и использует цепочки хэшей для обнаружения несанкционированных изменений. Этот однодокументный инструмент доступен на GitHub.

Подключение OpenClaw к Qwen2.5: осуществимость и соображения
Исследуйте возможность подключения OpenClaw к локальной модели Qwen2.5 Coder с 7 миллиардами параметров, чтобы решить проблемы с лимитом запросов при использовании API Gemini 3.

Клод как компилятор: Практический пересмотр подхода к разработке ИИ
В посте на Reddit утверждается, что Claude Code функционирует как компилятор, переводящий английский язык в работающее программное обеспечение, проводя параллели с историческими прорывами в вычислительной технике, такими как A-0 Грейс Хоппер и FORTRAN. Автор описывает генерацию 400 строк кода в 6 файлах из трёх абзацев описания на английском, обнаружив две проблемы за 25 минут.