Resumo Semanal de IA Multimodal: Holotron-12B, Nemotron Omni, GlyphPrinter e Mais
Desenvolvimentos em IA Multimodal de Código Aberto
Aqui estão os principais lançamentos e projetos de IA multimodal de código aberto da semana passada, selecionados do r/LocalLLaMA.
Holotron-12B
O Holotron-12B é um modelo de agente de uso em computador de código aberto disponível no Hugging Face. Ele é otimizado para alta produtividade e contextos com múltiplas imagens longas, servindo como uma alternativa aberta para o ecossistema de agentes de uso em computador além das APIs fechadas.
NVIDIA Nemotron Omni + Isaac GR00T N1.7
A NVIDIA lançou modelos abertos Nemotron 3 omni que integram linguagem, visão e voz em uma única pilha. O GR00T N1.7 é um modelo de visão-linguagem-ação projetado especificamente para aplicações em robótica.
GlyphPrinter
O GlyphPrinter aborda a precisão na renderização de texto em geradores de imagens de IA usando Region-Grouped Direct Preference Optimization. Ele equilibra estilo artístico com renderização precisa de texto e fornece pesos abertos. A abordagem corrige erros de ortografia localizados em imagens geradas.
SparkVSR
O modelo de super-resolução de vídeo do Google melhora a qualidade e a clareza do vídeo. Este projeto foca em melhorar a resolução de vídeo através do processamento por IA.
SegviGen
O SegviGen permite a segmentação de objetos 3D via colorização, reutilizando geradores de imagens 3D. O método enquadra a segmentação como uma tarefa de colorização e, segundo relatos, usa menos de 1% dos dados de treinamento exigidos por métodos antigos. O projeto inclui código aberto e uma demonstração.
OpenMAIC
O OpenMAIC (Multi-Agent Interactive Classroom) transforma qualquer tópico ou documento em uma sala de aula interativa com professores e colegas de classe de IA. Ele usa orquestração multiagente para gerar slides, questionários, simulações e discussões.
SkillNet
O SkillNet fornece infraestrutura aberta para criar, avaliar e organizar habilidades de agentes de IA em escala. O sistema permite que os agentes façam a transição de experiência transitória para domínio duradouro.
📖 Read the full source: r/LocalLLaMA
👀 See Also
Claude Code v2.1.136: Recusa total para o modo automático, correções do MCP OAuth e mais de 40 correções de bugs
A Anthropic lançou o Claude Code v2.1.136 com uma configuração hard_deny para regras do classificador de modo automático, correções para o desaparecimento de servidores MCP após /clear, problemas de concorrência na atualização de tokens OAuth e mais de 40 outras correções de bugs.
OpenAI e Rivais Publicam Plugins de Agentes: Um Formato de Pacote para Agentes de IA
OpenAI, Amazon, Microsoft, Cursor e Vercel lançaram o Agent Plugins 1.0, um padrão aberto para empacotar extensões de agentes de IA. Crie uma vez, execute em ChatGPT, Codex, Copilot, Cursor e muito mais.
Falhas de Conexão com Claude para Organizações que Bloqueiam o GitHub por Endereço IP
Uma atualização automática de status relata falhas de conexão para organizações que restringem o acesso ao GitHub por endereço IP, com acompanhamento contínuo do incidente via status.claude.com.
Analisando a Queima de Tokens da Janela de Contexto de 1M do Claude: Dados Mostram Crescimento Ilimitado e Acúmulo de Falhas de Cache
Análise da janela de contexto de 1 milhão do Claude revela dois fatores combinados que causam consumo rápido de tokens: crescimento ilimitado do contexto sem compactação automática e falhas caras de cache em tamanhos de contexto maiores. O autor fornece um script Python para analisar o uso pessoal de tokens a partir de arquivos de sessão JSONL.