Multimodal Input Pipeline
Конвейер обработки аудио, видео, изображений, текста и документов
MiPi принимает разнородные данные в разных форматах, сохраняет исходный материал и преобразует его в единый структурированный пакет обработки. Система работает с документами, изображениями, аудио и видео через специализированные пайплайны, но формирует единообразную модель результата для последующих систем. Каждый пакет сохраняет связь с исходным материалом и содержит извлечённый или транскрибированный текст, обработанный контент, промежуточные артефакты и метаданные выполнения. Это обеспечивает прослеживаемость от нормализованного результата обратно к оригиналу и позволяет следующим этапам работать со стабильной структурой, не зависящей от конкретного формата источника. MiPi задуман как независимый слой мультимодального приёма и нормализации данных. Его задача — превращать сырой вход в надёжные структурированные данные, не смешивая обработку источников с интерпретацией проекта или бизнес-логикой.
- Роль
- Автор, продуктовый архитектор, системный аналитик
- Система
- Java 21 / Spring Boot / Thymeleaf / PostgreSQL / MinIO / Speaches / LiteLLM / Docker
От сырого ввода к структурированным данным
Data Pipe — система обработки разнородных данных: аудио, видео, изображений, текста и документов. Она сохраняет исходный материал, извлекает или транскрибирует содержимое и формирует стандартизированный пакет, включающий ссылку на сырые данные, транскрипцию, обработанный текст и метаданные выполнения. Проект спроектирован как переиспользуемый входной слой, который изолирует последующие системы от особенностей исходных форматов и позволяет независимо развивать конвейеры обработки.