Testando o Claude Sonnet com um Jogo de Tabuleiro Estratégico: Desafios de Adesão às Regras

Testando Jogos Estratégicos com Claude Sonnet

Um desenvolvedor no r/ClaudeAI testou o Claude Sonnet jogando OFMOS® Essential, um jogo de tabuleiro estratégico patenteado onde os jogadores gerenciam um portfólio de produtos em um mapa de posicionamento. O teste envolveu jogar o jogo manualmente contra o modelo, prompt por prompt.

Detalhes da Implementação

O desenvolvedor projetou um prompt de sistema estruturado contendo:

• O conjunto completo de regras do OFMOS® Essential
• Uma representação do tabuleiro em texto
• Definições de ações
• Instruções de pontuação
• Diretivas de gerenciamento de turnos

Após cada turno, o Claude atualizou o estado do tabuleiro e as pontuações acumuladas com base no sistema de prompts estruturado.

Avaliação de Desempenho

O Claude Sonnet demonstrou várias capacidades:

• Entendeu as regras do jogo corretamente
• Articulou raciocínio estratégico durante o jogo
• Acompanhou as pontuações de forma consistente ao longo do jogo

No entanto, o modelo frequentemente fez movimentos ilegais. O desenvolvedor observou que esse comportamento era esperado, pois o sistema carecia de uma camada de geração de movimentos restrita, exigindo que o modelo se auto-aplicasse as regras — uma tarefa na qual ele frequentemente falhava.

Perguntas do Desenvolvedor

O desenvolvedor está buscando contribuições da comunidade sobre experimentos semelhantes com jogos de tabuleiro ou estratégicos, perguntando especificamente sobre:

• Experiências com aderência às regras em diferentes modelos
• Observações sobre profundidade estratégica na jogabilidade de IA
• Quais modelos tiveram melhor desempenho em cenários semelhantes

Esse tipo de teste é útil para desenvolvedores que trabalham com agentes de codificação de IA para entender as limitações práticas dos modelos de linguagem em ambientes baseados em regras, onde a aplicação precisa de restrições é necessária.