NVIDIA выпускает Nemotron-3-Ultra-550B: 55B активных параметров, контекст 1M, гибрид LatentMoE
NVIDIA выпустила Nemotron-3-Ultra-550B-A55B-BF16 — LLM масштаба frontier с общим количеством параметров 550 млрд и 55 млрд активных. Модель использует гибридную архитектуру Latent Mixture-of-Experts (LatentMoE), которая чередует слои Mamba-2, MoE и Attention, а также механизм Multi-Token Prediction (MTP) для ускоренной генерации. Длина контекста достигает 1 млн токенов.
Ключевые характеристики
- Архитектура: Гибрид LatentMoE – Mamba-2 + MoE + Attention + MTP
- Параметры: 550 млрд всего / 55 млрд активных
- Контекст: до 1 млн токенов
- Минимум GPU: 8x GB200/B200/GB300/B300, 16x H100, 8x H200
- Языки: английский, французский, испанский, итальянский, немецкий, японский, корейский, хинди, бразильский португальский, китайский
- Рассуждения: Включаются/отключаются настраиваемо через шаблон чата (
enable_thinking=True/False) - Лицензия: OpenMDW License Agreement v1.1
Модель предназначена для передовых рассуждений, сложных агентных рабочих процессов, анализа длинных контекстов, использования инструментов, многоязычных рассуждений и высокорискового RAG. Она обучена с использованием NVFP4 для вычислительной эффективности. Открытые веса, обучающие данные и рецепты включены в лицензию OpenMDW. Для локального вывода потребуется минимум 8x H200 или эквивалент.
📖 Источник: r/LocalLLaMA
👀 Смотрите также
Анализ Goldman Sachs показывает незначительное влияние ИИ на рост ВВП США к 2025 году.
Экономисты Goldman Sachs сообщают, что инвестиции в ИИ внесли «практически нулевой» вклад в рост ВВП США в 2025 году, ссылаясь на импортное оборудование и неизмеренные эффекты производительности как на ключевые факторы.
Анализ кампании астротурфинга OpenClaw и накачки токена $CLAWD
Расследование на Reddit показало, что вирусный рост OpenClaw в конце января был обусловлен рекурсивной кампанией астротурфинга с использованием примерно 400 бот-инстансов, которые создали ажиотаж для накачки токена $CLAWD до рыночной капитализации в $16 млн, после чего его стоимость обвалилась на 90%.
OpenClaw: разочаровывающий опыт или ошибка настройки?
Пользователи сообщают о проблемах с OpenClaw, который не выполняет задачи за пределами простых взаимодействий с чат-ботом, несмотря на правильную настройку в соответствии с официальными руководствами.
Диагностика операционного дрейфа и амнезии задач в OpenClaw с использованием Gemini 2.5 Flash на Proxmox
Пользователи OpenClaw сообщают о проблемах с поддержанием непрерывных рабочих процессов на виртуальной машине Proxmox, указывая на операционное отклонение и амнезию задач. Несмотря на стабильную работу в разовых задачах, модель Gemini 2.5 Flash испытывает трудности с автоматизацией и памятью в этой конфигурации.