Плагины LM Studio добавляют анализ веб-изображений для LLM с поддержкой компьютерного зрения.
Разработчик создал плагины для LM Studio, которые позволяют LLM с поддержкой зрения получать изображения из интернета и анализировать их прямо в приложении. Плагины работают без необходимости MCP/API или регистрации, используя простые скрипты, которые можно установить одним кликом с сайта LM Studio.
Ключевые особенности
Основной плагин "analyze-images" позволяет LLM:
- Получать изображения из интернета для анализа
- Автоматически объединять инструменты в цепочки в зависимости от задачи
- Преобразовывать полученные изображения в миниатюры меньшего размера для встраивания в чат, чтобы избежать загромождения
- Использовать изображения в полном разрешении для анализа, когда это возможно
- Встраивать изображения в ответы или использовать галереи в виде таблиц markdown, когда пользователь запрашивает несколько изображений
Разработчик также обновил существующие плагины:
- Плагин Duck-Duck-Go теперь работает с изображениями
- Плагин Visit Website теперь работает с изображениями
Требования и настройка
Для использования этих плагинов вам потребуется:
- Модель с поддержкой зрения (рекомендуются Qwen 3.5 9b или 27b)
- LM Studio с поддержкой плагинов
Разработчик поделился конкретными настройками Qwen 3.5, которые хорошо работают:
Температура: 1 Top K сэмплирование: 20 Штраф за повторение: 1 Штраф за присутствие: 1.9 Top P сэмплирование: 0.95 Min P сэмплирование: 0
Он отметил, что настройка штрафа за присутствие на уровне 1.9 помогла исправить проблемы с повторениями и предотвратить зацикливания.
Использовался системный промпт: "Вы — способный, вдумчивый и точный помощник. Всегда отдавайте приоритет правдивости, нюансам, проницательности и эффективности, адаптируя свои ответы конкретно под потребности и предпочтения пользователя. Исследуйте перед ответом на вопросы: используйте как рассуждения, так и вызовы инструментов для синтеза правильного вывода."
Ссылки на плагины
- Плагин Analyze Images: https://lmstudio.ai/vadimfedenko/analyze-images
- Duck-Duck-Go reworked: https://lmstudio.ai/vadimfedenko/duck-duck-go-reworked
- Visit Website reworked: https://lmstudio.ai/vadimfedenko/visit-website-reworked
Разработчик также поделился шаблоном промпта Jinja на Pastebin, который помог исправить ошибки вызова инструментов.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
Clarc v1.0: Рабочая ОС для Claude Code с 63 Агентами и 249 Навыками
Clarc — это плагин для Claude Code, который предоставляет 63 специализированных суб-агента, 249 предметных навыков и 178 слеш-команд для рабочих процессов разработки. Установка осуществляется через npx с поддержкой нескольких редакторов, включая Cursor и OpenCode.
SideX: Портируемая версия Visual Studio Code на основе Tauri
SideX — это порт Visual Studio Code, который заменяет Electron на Tauri, используя бэкенд на Rust и нативный веб-просмотр операционной системы. Проект заявляет о той же архитектуре, но с размером на 96% меньше, при этом основные функции редактирования и терминала уже работают.
Рецепт OpenClaw-RL от Reef ставит обновления весов со счётом за шлюзом выпуска
Рецепт эволюции весов OpenClaw-RL от Reef рассматривает 72 задачи GSM8K как 72 отдельные задачи, использует Qwen3-4B в ролях политики и модели процессного вознаграждения, а Qwen3-32B — в роли студента, и работает на семи GPU. Критерий трёх последовательных прохождений был достигнут на 14-й сессии.
Фреймворк с открытым исходным кодом для мультиагентных систем, извлечённый из утечки кода Claude.
Разработчик извлек систему оркестрации мультиагентов из утекшего исходного кода Claude Code и перестроил ее в модель-независимый фреймворк с открытым исходным кодом под лицензией MIT. Фреймворк на TypeScript объемом 8 000 строк включает планирование задач, меж-агентное взаимодействие и встроенные инструменты.