Компьютерное зрениеПоиск и RAG

ruCLIP (ai-forever)

Русская версия CLIP: сопоставляет картинки и подписи на русском. Позволяет искать фото по описанию и раскладывать изображения по категориям без обучения.

Разработчик
Сбер AI и SberDevices (ai-forever), Россия
Первый выпуск
янв 2022
Последний выпуск
янв 2022
Размеры
150M – 430M
Лицензия
Можно в коммерциюApache 2.0 (репозиторий на GitHub)
Русский язык
Есть
Запуск
Через свой серверРаботает и без видеокарты
Сферы
Торговля и маркетплейсы, Медиа и продакшн
Поставить на свой сервер Hugging Face GitHub

Какие задачи решает

  • Поиск товаров по фото и по русскому описанию
  • Сортировка картинок по категориям без разметки
  • Проверка соответствия фото и подписи

Где применяется

Интернет-магазиныФото- и медиаархивыМодерация контента

Требования к железу

НоутбукНоутбук или обычный ПК, до 8 ГБ видеопамяти — младшие версии
подходит
1 видеокартаОдна видеокарта на 16–80 ГБ — средние версии
нет версий
КластерСервер с несколькими видеокартами — флагманские версии
нет версий

Версии

  1. ruCLIP ViT-L/14 336
  2. ruCLIP ViT-B/32, B/16, L/14 (224 и 384 пикселя)

Как внедряю у заказчика

  1. ПодборВыбираю размер модели под задачу и ваше железо, проверяю на ваших примерах.
  2. УстановкаРазворачиваю на вашем сервере или в закрытом контуре, отдаю API.
  3. ДообучениеДообучаю на ваших данных (LoRA) или подключаю базу знаний — что дешевле для задачи.
  4. ВстраиваниеПодключаю к CRM, 1С, боту, сайту или рабочему чату, настраиваю мониторинг.

Похожие модели

Компьютерное зрениеSigLIP (наследник CLIP)Google · СШАМожно в коммерцию

Модели, которые переводят картинки и текст в общее пространство: можно искать фото по словам и классифицировать изображения без обучения. CLIP от OpenAI (2021) — предшественник.

ПодробнееПоиск и RAGJina EmbeddingsJina AI · ГерманияКоммерция с условиями

Сильные многоязычные эмбеддинги с длинным контекстом, v5-omni понимает текст, картинки и аудио. Свежие версии открыты только для некоммерческого использования.

Подробнее