Kreuzberg v4.7.0 añade inteligencia de código para 248 idiomas y una extracción de markdown mejorada.
Kreuzberg v4.7.0 ya está disponible. Esta es una biblioteca de inteligencia de documentos con núcleo en Rust que funciona con Python, TypeScript/Node.js, Go, Ruby, Java, C#, PHP, Elixir, R, C y WASM.
Inteligencia y Extracción de Código
El principal punto destacado es la inteligencia y extracción de código. Kreuzberg ahora admite 248 formatos a través de la biblioteca tree-sitter-language-pack. Esto permite un análisis eficiente del código para una integración directa como biblioteca para agentes y mediante MCP. Los agentes pueden trabajar con repositorios de código, revisar solicitudes de extracción, indexar bases de código y analizar archivos fuente.
Kreuzberg extrae a nivel de AST:
- Funciones
- Clases
- Importaciones
- Exportaciones
- Símbolos
- Docstrings
con fragmentación de código que respeta los límites de alcance.
Mejoras en la Calidad de Markdown
Una extracción deficiente de documentos puede generar problemas en el flujo de trabajo posterior. El equipo creó un sistema de evaluación comparativa utilizando puntuaciones Structural F1 y Text F1 en más de 350 documentos y 23 formatos, y luego optimizó en base a eso.
Mejoras específicas:
- LaTeX: mejoró del 0% al 100% SF1
- XLSX: aumentó del 30% al 100% SF1
- Tablas PDF SF1: pasó del 15.5% al 53.7%
Todos los 23 formatos ahora están por encima del 80% SF1. Los flujos de salida que recibe el pipeline ahora son estructuralmente correctos por defecto.
Otras Características Clave
- Nueva capa de renderizado de markdown y nuevo soporte de salida HTML
- Integración con OpenWebUI como backend de extracción de documentos
- Opciones para compatibilidad con docling-serve o conexión directa
- Arquitectura unificada donde cada extractor crea una representación de documento tipada estándar
- Formato de cable TOON: una codificación de documento compacta que reduce el uso de tokens de prompt en LLM entre un 30% y un 50%
- Etiquetado semántico de fragmentos
- Salida JSON
- Validación estricta de configuración
- Seguridad mejorada
Disponibilidad
Kreuzberg está disponible en GitHub: https://github.com/kreuzberg-dev/kreuzberg
Kreuzberg Cloud estará disponible pronto: una versión alojada para equipos que desean la misma calidad de extracción sin gestionar infraestructura. Más información en: https://kreuzberg.dev
Las contribuciones son bienvenidas.
📖 Read the full source: r/LocalLLaMA
👀 Ver también
Directorio de Servidores MCP Enumera Más de 1000 Servidores en 20 Categorías
Un directorio curado proporciona comandos de instalación y fragmentos de configuración para más de 1000 servidores MCP en categorías que incluyen bases de datos, herramientas de desarrollo, automatización de navegadores, IA/ML y cloud/devops. El directorio es gratuito para navegar y enviar contribuciones.
OpenTrace: Servidor de Observabilidad Autohospedado con más de 75 Herramientas MCP
OpenTrace es un servidor de observabilidad autoalojado que proporciona registros, análisis de usuarios e introspección de bases de datos a través de más de 75 herramientas MCP, funcionando en un VPS de $4 con almacenamiento SQLite y conexiones de solo lectura a Postgres.
Agente de revisión de PR de código abierto PrixAI detecta todos los 10/10 errores plantados a 6 veces menor costo que CodeRabbit
Un usuario de Reddit creó PrixAI, un agente de revisión de PR de código abierto que utiliza modelos de inferencia locales/económicos para igualar las funciones de CodeRabbit con un costo 6 veces menor, detectando los 10 problemas planteados intencionalmente en un PR de prueba.
GLM 5 en Mac M3: Observaciones de Rendimiento para Codificación Agéntica
Un usuario informa ejecutar GLM 5 mediante cuantización de 4 bits de MLX en un Mac M3 con 512 GB de RAM, encontrándolo utilizable para programación agéntica con contextos menores a 50 mil tokens, pero notando ralentizaciones significativas más allá de ese umbral.