Caliby: С открытым исходным кодом встроенная векторная база данных для AI-агентов с гибридным текстово-векторным хранением
Caliby теперь с открытым исходным кодом: встроенная, работающая в процессе векторная база данных, разработанная для нагрузок AI Agent и RAG. Разработанная командой, включающей доктора наук из группы баз данных MIT (команда Майкла Стоунбрейкера) и Sea-Land AI, она представляет собой единую библиотеку на C++ с привязками к Python.
Зачем еще одна векторная БД?
Команда обнаружила, что существующие решения не соответствуют требованиям для агентов/LLM:
- FAISS: Чисто in-memory, нет постоянства — перезапуск очищает индекс.
- pgvector: Потолок производительности из-за зависимости от PostgreSQL.
- Chroma / Qdrant / Milvus: Требуют отдельных сервисов, слишком тяжелы для встраиваемых сценариев.
- LanceDB: Встраиваемый, но не хватает продвинутых индексов, таких как DiskANN, узкие места в производительности.
Caliby стремится быть легковесным, встраиваемым движком данных, как DuckDB, но для хранения векторов и текста.
Архитектура: гибридное хранение текста + векторов
Caliby объединяет текстовые и векторные данные в единой системе. Вместо того чтобы жонглировать векторной БД и реляционной БД, вы храните эмбеддинги, необработанный текст и метаданные в одной библиотеке. Архитектура использует буферный пул с организацией страниц для постоянства.
Поддерживаемые индексы
- HNSW: Общий высокопроизводительный поиск, оптимизированный под CPU.
- DiskANN (граф Vamana): Предназначен для сценариев на диске, превосходит FAISS на диске.
- IVF+PQ: Инвертированный файл с продуктным квантованием для компактных индексов.
Caliby также поддерживает полный перебор с SIMD (AVX-512, AVX2, SSE) функциями расстояния (L2, InnerProduct, Cosine).
Заявления о производительности
Caliby превосходит pgvector в 4 раза и значительно опережает FAISS в сценариях хранения на диске. Он обрабатывает миллионы-десятки миллионов векторов на диске без необходимости отдельного сервиса.
Начало работы
Просто установите пакет:
pip install calibyPython API предоставляет классы HnswIndex, DiskANN и IVFPQIndex через pybind11. Никаких зависимостей, настройки сервера или DevOps.
Для кого это
Разработчики AI Agent и создатели пайплайнов RAG, которым нужна встраиваемая векторная база данных с нулевой инфраструктурой, гибридными возможностями текст+вектор и производительностью производственного уровня.
📖 Прочитать полный источник: r/LocalLLaMA
👀 Смотрите также
Sentinel: Самостоятельно размещаемая платформа агентов для подписчиков Claude Code
Sentinel — это бесплатная платформа с открытым исходным кодом, которая работает напрямую на вашем существующем токене OAuth Claude Code без накладных расходов на API. Она предоставляет чистый интерфейс оператора с автоматизацией браузера в реальном времени через встроенный VNC и включает такие функции, как Git-контроль, журналы трассировки сессий и структурированную иерархическую память.
Freddy CLI: Подключение данных о здоровье к ИИ-агентам через MCP
Фредди выпустил open-source CLI для подключения данных носимых устройств (Oura, Polar, Withings и др.) к AI-агентам через MCP. Команды для OAuth-аутентификации, запросов данных и обновления токенов.
Клауд Хаба Навыков: Поисковый репозиторий для 789+ навыков кодирования Клауда и 10 автономных агентов
Claude Skills Hub (clskills.in) предоставляет централизованный интерфейс поиска для 789+ файлов навыков Claude Code по 71 категории, а также 10 автономных ИИ-агентов, которые объединяют несколько навыков в полные рабочие процессы. Этот проект с открытым исходным кодом агрегирует навыки из нескольких коллекций сообщества и предлагает загрузку в один клик.
Selfware: локальная платформа для ИИ-агентов на Rust с архитектурой PDVR
Selfware — это фреймворк с открытым исходным кодом для ИИ-агентов, написанный на Rust для локального вывода, реализующий когнитивный цикл PDVR с 54 встроенными инструментами и предназначенный для длительных задач на потребительском оборудовании.