Skip to content

H Company выпустила открытый энкодер для мультиязычного поиска по тексту и изображениям в RAG

Короткий ответ

H Company выпустила NeoMME — открытую модель-энкодер на Hugging Face, которая встраивает текст и изображения на нескольких языках в единую систему поиска, снижая потребность в отдельных энкодерах под каждый язык или модальность в пайплайнах поиска и поддержки.

Что это значит для операций

Если ваша команда поддержки или продаж ищет информацию по руководствам, скриншотам или тикетам на нескольких языках, скорее всего сейчас вы используете отдельные модели эмбеддингов для текста и изображений, что добавляет задержки и накладные расходы на интеграцию. Единый мультиязычный мультимодальный энкодер вроде NeoMME мог бы объединить это в один пайплайн поиска — что полезно для команд поддержки, работающих с вложениями (скриншоты, сканы счетов, фото товаров) наряду с текстовыми запросами на разных языках. Прежде чем переходить на него, проверьте точность поиска NeoMME на реальных типах ваших документов в сравнении с текущим энкодером; открытые веса позволяют протестировать это в тестовой среде без привязки к вендору, но бенчмарки из блога источника независимо не проверены.

H Company опубликовала NeoMME — энкодер с открытыми весами, описываемый как мультимодальный по своей природе и многоязычный, размещённый на Hugging Face. Модель построена так, чтобы совместно встраивать текст и изображения и обрабатывать несколько языков в рамках одного энкодера, вместо того чтобы требовать отдельные модели под каждый язык или модальность.

Для B2B-компаний, эксплуатирующих системы retrieval-augmented generation (RAG) — будь то внутренние базы знаний, поиск в клиентской поддержке или контент для поддержки продаж — энкодер является тем компонентом, который превращает документы, изображения и запросы в векторы для сопоставления. Большинство команд сейчас комбинируют текстовый энкодер, ориентированный на английский язык, с отдельным энкодером изображений, либо запускают несколько языко-специфичных моделей при обслуживании международных клиентов.

Заявленная цель разработки NeoMME — эффективность: единая модель, покрывающая несколько языков и оба типа входных данных (текст и изображения), что может сократить число моделей, которые команде эксплуатации нужно разворачивать, хостить и поддерживать для поисковой инфраструктуры. В блоге источника это преподносится как снижение вычислительных накладных расходов по сравнению с параллельным запуском одномодальных энкодеров — это утверждение независимо не подтверждено и должно быть проверено на собственном наборе документов команды перед миграцией.

Для команды поддержки, обрабатывающей тикеты со скриншотами, PDF или сканированными вложениями на французском, немецком или испанском языках наряду с английским, единый энкодер упрощает уровень поиска в любом RAG-инструменте службы поддержки. Команды продаж, строящие AI-поиск по каталогам или коммерческим предложениям для региональных рынков, сталкиваются с аналогичной возможностью консолидации.

Внедрение требует оценки: командам следует протестировать точность поиска NeoMME на собственных тикетах поддержки, документах по продукту или изображениях каталога в сравнении с тем энкодером, который сейчас работает в их поисковом или RAG-стеке, поскольку опубликованные в блоге релиза бенчмарки не заменяют тестирование на данных конкретного домена. Открытые веса означают, что не нужно вести лицензионные переговоры для пробного запуска, но интеграция всё равно требует переиндексации существующих эмбеддингов документов, что влечёт разовые вычислительные затраты, пропорциональные размеру корпуса.

Никаких обязательств по цене или хостингу, помимо открытого релиза на Hugging Face, объявлено не было; операторам следует сверить требования модели к вычислительным ресурсам с бюджетом на инференс, прежде чем направлять на неё продуктивный трафик.

Источник: Hugging Face

Следующий шаг

Visibility Analyzer

Ровно это Visibility Analyzer и меряет на живом сайте: в каких ответах вас цитируют, до каких страниц движок не дотягивается и что чинить первым. Запуск бесплатный.

Запустить бесплатный аудит видимости

Запуск бесплатный, карта не нужна.

Стоимость
Бесплатно
Срок
Один прогон, минуты

Бесплатный тариф: два анализа в день, без карты.