Plugin Pair Programmer Adiciona Tela ao Vivo, Voz e Contexto de Áudio ao Claude Code

Um desenvolvedor lançou o Pair Programmer, um plugin que aborda a falta de contexto em tempo real do Claude Code, fornecendo percepção ao vivo da área de trabalho. A ferramenta captura três fluxos de dados: conteúdo da tela (com indexação visual gerando descrições curtas de cena), entrada do microfone (transcrição mais classificação leve de intenção para perguntas, explicações ou comandos) e áudio do sistema (indexando reuniões, tutoriais ou outros áudios reproduzidos na máquina).
Arquitetura e Implementação
O sistema usa um pipeline multiagente em vez de uma abordagem de modelo único. Ele executa agentes especializados em paralelo:
- Leitor de tela para contexto visual
- Processador de voz para transcrição do microfone e classificação de intenção
- Classificador de áudio para áudio do sistema
- Orquestrador que correlaciona todas as entradas e sintetiza uma única resposta
O plugin é construído sobre a infraestrutura VideoDB. Embora a indexação atualmente use modelos em nuvem, o design é independente de modelo — a camada de Index pode substituir qualquer VLM ou LLM. O desenvolvedor menciona interesse em conectar modelos locais para as camadas de descrição visual e transcrição.
Status Atual e Instalação
O plugin atualmente é apenas para macOS. A instalação requer três comandos. O repositório GitHub está disponível em https://github.com/video-db/claude-code/tree/main.
O desenvolvedor está buscando feedback sobre abordagens arquitetônicas, especificamente se os desenvolvedores preferem o pipeline multiagente com modelos especializados e orquestração ou se preferem avançar para uma solução de modelo único de ponta a ponta para sistemas de percepção de desktop.
📖 Leia a fonte completa: r/ClaudeAI
👀 See Also

Pali v0.1: Infraestrutura de Memória de Código Aberto para LLMs com Benchmarks Reproduzíveis
Pali é uma infraestrutura de memória de código aberto para LLMs construída em Go como um único binário com APIs multi-inquilino, recuperação híbrida e extensões plug-and-play. A versão v0.1 inclui um conjunto de benchmarks com resultados reproduzíveis mostrando métricas de desempenho para diferentes configurações.

Conversa Franca: Uma Habilidade Open-Source do Claude que Exige Feedback Honesto, Não Validação
Uma nova Skill open-source para Claude, chamada Straight Talk, faz com que Claude se recuse a validar ideias até entender a situação, gerando contra-argumentos e testando suposições.

TigrimOS v1.1.0 e Tiger CoWork v0.5.0 lançados com enxames de agentes remotos e governança configurável.
TigrimOS v1.1.0 e Tiger CoWork v0.5.0 lançados hoje adicionam comunicação entre enxames em instâncias remotas e cinco protocolos de governança configuráveis. Ambos são auto-hospedados, gratuitos e de código aberto.

Skill Bill: Uma Estrutura de Governança Baseada em Markdown para Habilidades de Codificação em IA
Um desenvolvedor criou o Skill Bill, um framework de 44 habilidades de IA baseadas em Markdown para Kotlin, Android/KMP, PHP e Go que aborda problemas de gerenciamento de prompts como derivação de nomenclatura e lógica duplicada. Inclui habilidades de orquestração como 'feature-implement' que encadeiam 10-12 invocações de habilidades e sincroniza com Claude Code, Copilot, GLM e Codex.