Технические проблемы Ollama и споры в сообществе

Основные технологии Ollama и проблемы с атрибуцией
Вся способность к выводу Ollama изначально была получена от llama.cpp, механизма вывода на C++, созданного Георгием Гергановым в марте 2023 года. Более года в README Ollama не упоминался llama.cpp, а их бинарные дистрибутивы не включали необходимое уведомление о лицензии MIT для кода llama.cpp, который они распространяли.
Сообщество открыло issue #3185 на GitHub в начале 2024 года с запросом о соблюдении лицензии, который оставался без ответа от сопровождающих более 400 дней. Когда в апреле 2024 года был открыт issue #3697 с конкретным запросом о признании llama.cpp, сооснователь Ollama Майкл Чианг в итоге добавил одну строку внизу README: "Проект llama.cpp основан Георгием Гергановым."
Технические проблемы с собственным бэкендом
В середине 2025 года Ollama отказалась от использования llama.cpp в качестве бэкенда для вывода и создала собственную реализацию напрямую на основе ggml. Этот собственный бэкенд вернул ошибки, которые llama.cpp решил годами ранее, включая:
- Сломанную поддержку структурированного вывода
- Сбои моделей зрения
- Аварии утверждений GGML в нескольких версиях
- Модели, которые отлично работали в исходном llama.cpp, не работали в Ollama
- Отсутствие поддержки типов тензоров, необходимых для новых выпусков, таких как GPT-OSS 20B
Георгий Герганов выявил, что Ollama форкнула и внесла плохие изменения в GGML.
Бенчмарки производительности
Множественные тесты сообщества показывают, что llama.cpp работает в 1,8 раза быстрее, чем Ollama, на том же оборудовании с той же моделью:
- 161 токен в секунду против 89 токенов в секунду
- На CPU разрыв в производительности составляет 30-50%
- Недавнее сравнение на Qwen-3 Coder 32B показало примерно на 70% более высокую пропускную способность у llama.cpp
Накладные расходы на производительность возникают из-за демон-слоя Ollama, плохой эвристики разгрузки GPU и вендорного бэкенда, который отстаёт от основного.
Проблемы с наименованием моделей
Когда DeepSeek выпустила своё семейство моделей R1 в январе 2025 года, Ollama перечислила уменьшенные дистиллированные версии (модели, такие как DeepSeek-R1-Distill-Qwen-32B), не указывая чётко, что они были дистиллированными, а не полными моделями.
📖 Read the full source: HN LLM Tools
👀 Смотрите также

Реализация локального агента OpenClaw с кэшированием TurboQuant для оборудования среднего класса
Приложение для OpenClaw с локальными моделями теперь работает на устройствах среднего класса, таких как MacBook Air с 16 ГБ оперативной памяти, используя кэширование TurboQuant и прогрев контекста. Реализация включает патчи для llama.cpp для надежного вызова инструментов и достигает 10-15 токенов в секунду с моделями Gemma 4 и QWEN 3.5.

Навык локального редактирования PII для OpenClaw использует модель GLiNER.
Новый навык OpenClaw перехватывает исходящие ответы и пропускает их через локальную модель nvidia/gliner-PII для обнаружения и редактирования конфиденциальной информации, такой как API-ключи и PII, заменяя их метками вроде [API_KEY] и добавляя уведомления об удалении.

civStation: Открытая платформа VLM для управления игрой Civilization VI с помощью естественного языка
civStation — это открытый стек компьютерного использования, который позволяет управлять Civilization VI с помощью голоса и естественного языка, переводя команды высокоуровневой стратегии в действия интерфейса через цикл наблюдения и выполнения на основе VLM.

Форман: Открытый Slack-бот для удаленного управления локальным кодом Claude
Foreman — это бесплатный бот для Slack с открытым исходным кодом, который обеспечивает удалённое управление локально запущенными экземплярами Claude Code. Он позволяет разработчикам отправлять задачи в Claude со своего телефона, сохраняя полный локальный доступ к файловой системе, инструментам и окружению.