Orden Judicial de Georgia Contiene Citas Legales Alucinadas por IA

Una audiencia de apelación ante la Corte Suprema de Georgia expuso errores significativos de citación en una orden de un tribunal de primera instancia, con evidencia que sugiere que estuvieron involucradas alucinaciones generadas por IA. Durante los argumentos en una apelación por condena por asesinato, el Juez Principal Nels S.D. Peterson identificó graves problemas con la orden del tribunal de primera instancia que denegaba un nuevo juicio.
Detalles clave de la audiencia
Según el material fuente, el Juez Principal Peterson declaró que la orden contenía:
- "Al menos cinco citas a casos que no existen"
- "Al menos cinco citas más a casos que no respaldan la proposición para la cual se citan"
- "Tres citas que no existen"
La fiscal, Leslie, respondió que su orden inicial presentada había sido revisada y no asumió responsabilidad por las citas erróneas. Sin embargo, el Juez Principal Peterson replicó: "Esos casos inexistentes fueron citados en su escrito inicial oponiéndose a la moción para un nuevo juicio."
Documentación disponible
La fuente indica que hay dos documentos clave disponibles para su examen:
- Una orden de 33 páginas que deniega un nuevo juicio
- Una orden propuesta de 37 páginas del estado
Este incidente destaca los riesgos de usar herramientas de IA para investigación legal y citación sin una verificación exhaustiva. Aunque la fuente no especifica qué herramienta de IA se utilizó, el patrón de casos alucinados y citas mal atribuidas coincide con las limitaciones conocidas de los modelos de lenguaje actuales en contextos legales.
📖 Read the full source: HN LLM Tools
👀 Ver también

Modelos Frontier de OpenAI y Codex ahora disponibles en AWS
Los modelos fronterizos de OpenAI y Codex ya están disponibles de forma general en AWS, permitiendo a las empresas usar OpenAI a través de sus entornos y flujos de adquisición existentes en AWS.

Anotaciones de Amazon S3: 1GB de metadatos por objeto para flujos de trabajo de agentes de IA
AWS anuncia anotaciones S3 — hasta 1.000 anotaciones por objeto, cada una de hasta 1 MB, totalizando 1 GB. Mutables, consultables mediante Athena, sin cargos de recuperación para objetos Glacier.
El Puntero de IA de Google DeepMind: Reimaginando el Ratón para las Interacciones con Gemini
Google DeepMind presenta un puntero de mouse con inteligencia artificial que usa Gemini para entender el contexto, permitiendo comandos como señalar una imagen y decir 'Muéstrame las indicaciones', integrado en Chrome y Googlebook.

Filtración de Claude Chat a través de Google Search: Lo que los desarrolladores deben saber
Durante el fin de semana, los enlaces compartidos de Claude AI fueron indexados por Google, exponiendo chats privados que incluían estrategias legales y discusiones técnicas. Anthropic ha bloqueado la búsqueda desde entonces. Es el segundo incidente de este tipo.