Локальный конвейер перевода книг использует модели Qwen 32B и Mistral 24B с контекстуальной системой RAG

✍️ OpenClawRadar📅 Опубликовано: 1 апреля 2026 г.🔗 Source
Локальный конвейер перевода книг использует модели Qwen 32B и Mistral 24B с контекстуальной системой RAG
Ad

Разработчик создал полностью локальный автоматизированный конвейер перевода книг, который преобразует файлы PDF в формат ePub с использованием восьми скриптов на Python. Система решает распространённые проблемы перевода, такие как потеря контекста и проблемы с форматированием, через многоэтапный рабочий процесс.

Детали рабочего процесса

Конвейер состоит из восьми скриптов, которые обрабатывают весь процесс:

  • Извлечение PDF: Использует Marker для извлечения содержимого из PDF с сохранением элементов форматирования, таких как жирный текст, главы и изображения
  • Сегментация текста: Разделяет извлечённый текст на управляемые фрагменты
  • Создание контекста: Перед переводом отправляет отрывки из всей книги в Qwen 32B для создания «Супер-Библии» — глобального глоссария, содержащего персонажей, тон и атмосферу
  • Перевод: Qwen 32B переводит каждый текстовый сегмент, обращаясь к Супер-Библии для поддержания согласованности
  • Стилевая правка: Mistral 24B выступает в роли редактора, проверяя переводы Qwen и переписывая их для идеального литературного стиля
  • Сборка: Финальный скрипт собирает все переведённые сегменты, вставляет обратно изображения и использует Pandoc для вывода отполированного файла ePub
Ad

Функции автоматизации

Система включает скрипт мониторинга, который отслеживает назначенную папку. Пользователи просто помещают PDF в эту папку, и конвейер автоматически обрабатывает его. Через несколько часов система выводит как переведённый ePub, так и квитанцию с временем обработки.

Разработчик отмечает, что результаты удивительно эффективны, хотя и не на 100% идеальны, и упоминает несколько идей для улучшения. Вся система работает локально на персональном компьютере без необходимости внешних сервисов.

📖 Read the full source: r/LocalLLaMA

Ad

👀 Смотрите также

Anthropic открывает исходный код Claude for Legal: пакет плагинов для проверки контрактов, сортировки NDA и многого другого
Инструменты

Anthropic открывает исходный код Claude for Legal: пакет плагинов для проверки контрактов, сортировки NDA и многого другого

Anthropic выпустил Claude for Legal — репозиторий плагинов, агентов и MCP-коннекторов для юридических задач, включая проверку соглашений с поставщиками, сортировку NDA и мониторинг соблюдения нормативных требований.

OpenClawRadar
Приложение Claude Desktop добавляет функцию проектов в интерфейс совместной работы.
Инструменты

Приложение Claude Desktop добавляет функцию проектов в интерфейс совместной работы.

В настольном приложении Claude теперь доступна функция «Проекты» в интерфейсе Cowork, позволяющая пользователям организовывать задачи и контекст в выделенных рабочих пространствах. Файлы и инструкции остаются на локальном компьютере пользователя, с возможностью импортировать существующие проекты или создавать новые.

OpenClawRadar
Обновление Hawkeye добавляет оркестрацию роя, удаленные задачи и поддержку локальных моделей.
Инструменты

Обновление Hawkeye добавляет оркестрацию роя, удаленные задачи и поддержку локальных моделей.

Hawkeye v1.0+ теперь поддерживает оркестрацию мультиагентных роев, удаленную очередь задач и улучшенную интеграцию с Ollama/LM Studio. Локальный рекордер полета ИИ-агентов помогает разработчикам отслеживать, что происходит, когда агенты работают в репозиториях.

OpenClawRadar
Когтевой Компактор: 14-ступенчатый движок сжатия токенов для конвейеров LLM
Инструменты

Когтевой Компактор: 14-ступенчатый движок сжатия токенов для конвейеров LLM

Claw Compactor — это движок сжатия токенов LLM с открытым исходным кодом, использующий 14-ступенчатый Fusion Pipeline для достижения среднего сжатия 54% без затрат на вывод LLM. Включает специализированные компрессоры для кода, JSON, логов, диффов и результатов поиска с возможностью обратимого сжатия.

OpenClawRadar