Стек под интернет-магазин: карточка из одной фотографии

Карточка товара это четыре разные работы: посмотреть на вещь и описать её, привести фотографию в товарный вид, дорисовать то, чего не сняли, и перевести всё на языки, на которых вы продаёте. Ни одна модель не делает все четыре хорошо, потому что это разные типы моделей: одна смотрит, вторая чистит, третья рисует, четвёртая переводит. В связке они дают конвейер, который переваривает тысячу позиций без найма отдельной редакции.

Шаг 1. Описать товар по фотографии

Модель, которая понимает картинки и текст одновременно, смотрит на снимок и выдаёт черновик: тип вещи, материал, цвет, фурнитура, назначение. Это не замена карточке от поставщика, а способ заполнить пустые поля там, где от поставщика пришли только фото и артикул. Без этого звена описания пишут вручную, и на большом каталоге узкое место именно здесь, а не в фотостудии.

Чем это делается

Картинка + текстRUOllama2023–2025

Qwen-VL

Alibaba (команда Qwen) · Китай

Одна из сильнейших открытых моделей зрения: читает документы, таблицы, графики, видео, работает с интерфейсами. С Qwen3.5 зрение встроено прямо в основную модель Qwen.

  • Извлечение данных из сканов счетов и накладных
  • Разбор фотографий товаров и витрин
  • Анализ видео и записей с камер
Размеры
2B – 235B-A22B
Железо
от: Ноутбук
Можно в коммерциюПодробнее
Картинка + текстRUGGUF2023–2026

InternVL

Shanghai AI Laboratory (OpenGVLab) · Китай

Большая линейка китайских моделей зрения с размерами от 1B до 241B. InternVL-U (4B) объединяет понимание картинок, их генерацию и редактирование.

  • Понимание документов, схем и графиков
  • Ответы на вопросы по фото
  • Разбор видео
Размеры
1B – 241B-A28B
Железо
от: Ноутбук
Можно в коммерциюПодробнее
Картинка + текстOllama2024–2026

MiniCPM-V

OpenBMB (ModelBest и Университет Цинхуа) · Китай

Компактные модели зрения, которые работают даже на телефоне и ноутбуке. Хорошо читают текст на фото, понимают видео; версия 4.6 весит всего 1.3B.

  • Распознавание текста на фото прямо на устройстве
  • Разбор чеков и документов без отправки в облако
  • Описание фото и видео
Размеры
1.3B – 8B
Железо
от: Ноутбук
Можно в коммерциюПодробнее

Шаг 2. Привести фотографии в товарный вид

Модели для обработки фото убирают фон, поднимают резкость и вытягивают мелкие снимки до нужного разрешения. Это скучное, но самое заметное покупателю звено: на витрине сначала видят картинку, а потом читают текст. Если его выкинуть, карточки выглядят разнородно, часть фото не проходит требования маркетплейсов, и позиции возвращаются на переделку.

Чем это делается

Обработка фото2023–2026

BRIA RMBG

BRIA AI · Израиль

Удаление фона от BRIA, обучено на лицензированных фото. Мягкие края, волосы, прозрачность. Есть версии для видео. Для бизнеса нужен платный договор.

  • Вырезка товара на белый фон
  • Фото сотрудников и экспертов без фона
  • Удаление фона на видео
Размеры
44M – 220M
Железо
от: Ноутбук
Только некоммерческоеПодробнее
Обработка фотоGGUF2024–2025

BiRefNet

Нанькайский университет · Китай

Открытая модель точного выделения объекта и удаления фона под лицензией MIT. На ней построен RMBG-2.0. Есть версии для 2K и для волос и полупрозрачных краёв.

  • Удаление фона с фото товаров потоком
  • Точные маски для дизайна и печати
  • Вырезка людей с волосами для рекламы
Размеры
около 220M (есть облегчённые lite)
Железо
от: Ноутбук
Можно в коммерциюПодробнее
Обработка фотоGGUFНе развивается2021–2022

Real-ESRGAN

Tencent ARC Lab · Китай

Классика увеличения фото в 2–4 раза с очисткой от шума и артефактов сжатия. Лёгкая, работает даже на процессоре. Есть версии для рисунков и аниме.

  • Увеличение старых и мелких фото товаров
  • Очистка картинок от артефактов сжатия
  • Подготовка изображений к печати
Размеры
около 17M
Железо
от: Ноутбук
Можно в коммерциюПодробнее

Шаг 3. Дорисовать то, чего нет на съёмке

Генерация изображений закрывает дыры каталога: фон под сезон, вариант цвета, простая сцена для баннера или обложки категории. Работать это должно поверх реальной фотографии товара, а не вместо неё, иначе покупатель получит вещь, не похожую на картинку. Без звена приходится либо снимать заново, либо оставлять пустые места в карточке и терять показы.

Чем это делается

КартинкиGGUF2024–2026

FLUX

Black Forest Labs · Германия

Генерация картинок от авторов Stable Diffusion. Хорошо рисует текст на изображении и держит композицию.

  • Картинки для карточек товаров
  • Баннеры и обложки
  • Редактирование фото по описанию (Kontext)
Размеры
4B – 32B
Железо
от: 1 видеокарта
Коммерция с условиямиПодробнее
КартинкиGGUF2025–2026

Qwen-Image

Alibaba · Китай

Генерация и редактирование картинок, в том числе с текстом на изображении. Ранние версии можно в коммерцию, свежая 2.1 — только некоммерческая.

  • Инфографика для карточек товаров
  • Правка фото по текстовой команде
  • Рекламные креативы
Размеры
7B – 20B
Железо
от: 1 видеокарта
Коммерция с условиямиПодробнее
КартинкиGGUF2022–2024

Stable Diffusion

Stability AI · Великобритания

Модель, с которой началась открытая генерация картинок. Огромная экосистема дообучений, стилей и плагинов, работает даже на домашнем ПК. Популярные ускорители SDXL-Lightning и Hyper-SD сделала ByteDance.

  • Иллюстрации и баннеры для рекламы
  • Фоны и сцены для карточек товаров
  • Дообучение под фирменный стиль
Размеры
0.9B – 8B
Железо
от: Ноутбук
Коммерция с условиямиПодробнее

Шаг 4. Перевести карточки

Специализированная модель перевода разворачивает каталог на другие языки дешевле и ровнее, чем универсальная языковая модель, и не пересказывает текст по-своему. Важно вести словарь своих терминов и названий, иначе один и тот же материал в разных карточках назовётся по-разному. Без этого шага выход на соседний рынок упирается в ручной перевод тысяч описаний.

Чем это делается

ПереводRUGGUFНе развивается2022–2023

NLLB-200

Meta · США

Переводчик на 200 языков, включая редкие и малые. Русский есть. Сильна по охвату языков, но лицензия запрещает коммерческое использование.

  • Перевод текстов между 200 языками
  • Перевод на редкие языки, где нет других моделей
  • Сравнение качества при выборе переводчика
Размеры
600M – 3.3B (и 54B MoE)
Железо
от: Ноутбук
Только некоммерческоеПодробнее
ПереводRUGGUFНе развивается2023

MADLAD-400

Google · США

Переводчик Google более чем на 400 языков под свободной лицензией. Русский есть. Хорошая замена NLLB, когда нужна коммерция.

  • Перевод документов и писем
  • Перевод каталогов и описаний товаров
  • Перевод на языки стран СНГ и Азии
Размеры
3B – 10B
Железо
от: Ноутбук
Можно в коммерциюПодробнее
ПереводRU2020–2026

OPUS-MT (MarianMT)

Helsinki-NLP, Хельсинкский университет · Финляндия

Более тысячи маленьких переводчиков, каждый под свою пару языков. Есть русский-английский и обратно. Работают быстро даже на обычном процессоре.

  • Массовый перевод коротких текстов
  • Перевод прямо на сервере без видеокарты
  • Перевод отзывов и заявок перед анализом
Размеры
25M – 240M
Железо
от: Ноутбук
Можно в коммерциюПодробнее

На что смотреть до внедрения

Главный риск в том, что модель уверенно допишет характеристики, которых у товара нет: состав, страну, гарантию. Правило простое: всё, за что отвечает продавец перед покупателем, берётся из карточки поставщика, а модель пишет только то, что видно на фотографии. Заложите выборочную проверку человеком и ведите один словарь терминов на весь каталог. Требования маркетплейсов к изображениям и к описаниям меняются, сверяйтесь с их правилами до массовой заливки.

Другие стеки

Нужна модель под вашу задачу?

Открытую модель можно поставить на свой сервер: данные не уходят в чужое облако, нет оплаты за каждый запрос, модель можно дообучить на ваших документах.

  1. ПодберуМодель и размер под задачу и бюджет на железо
  2. ПоставлюНа ваш сервер или в закрытый контур, с API
  3. ДообучуНа ваших данных или подключу базу знаний
  4. ВстроюВ CRM, 1С, бота, сайт или рабочий чат
Обсудить внедрение