Florence-2 или Grounding DINO: что выбрать для поиска объектов

Florence-2 от Microsoft — очень маленькая модель под MIT, которая одной командой делает подписи, поиск объектов, сегментацию и чтение текста на фото; работает на процессоре и хороша как универсальный инструмент разметки. Grounding DINO от IDEA Research заточен под одно: найти на картинке объект по текстовому описанию вроде «человек без каски», без обучения на своих данных. С лицензиями разница принципиальная: у Florence-2 чистый MIT, а у Grounding DINO коммерция с условиями — сам Grounding DINO под Apache 2.0, но новое поколение Rex-Omni идёт под собственной IDEA License на базе Qwen Research License, её нужно читать до запуска в продакшн.

Сравнение по данным каталога

ПараметрFlorence-2Grounding DINO / Rex-Omni
НаправлениеКартинка + текст, Компьютерное зрениеКомпьютерное зрение
РазработчикMicrosoft, СШАIDEA Research, Китай
Выпускииюн 2024 – июн 2024мар 2023 – окт 2025
Размеры0.23B – 0.77B172M – 3B
ЖелезоНоутбукНоутбук, 1 видеокарта
КоммерцияМожно в коммерциюКоммерция с условиями
ЛицензияMITGrounding DINO — Apache 2.0; Rex-Omni — собственная IDEA License на базе Qwen Research License
Русский языкНетНе требуется
OllamaНетНет
Без видеокартыДаДа
Задачи
  • Чтение текста на фото
  • Поиск и выделение объектов
  • Автоматические подписи к фото
  • Разметка данных для обучения
  • Поиск объектов по описанию без разметки
  • Автоматическая разметка данных для обучения
  • Проверка фото на соответствие требованиям

Выбирайте Florence-2, если

  • Нужен один инструмент сразу на подписи, сегментацию и чтение текста
  • Важна простая лицензия MIT без условий по коммерции
  • Работать надо на процессоре, модель от 0.23B
Florence-2

Выбирайте Grounding DINO / Rex-Omni, если

  • Нужно искать объекты по произвольному текстовому описанию без разметки
  • Задача — автоматическая разметка данных под обучение своей модели
  • Проверка фото на соответствие требованиям: видеоаналитика, ритейл, безопасность
Grounding DINO / Rex-Omni

Другие сравнения

Нужна модель под вашу задачу?

Открытую модель можно поставить на свой сервер: данные не уходят в чужое облако, нет оплаты за каждый запрос, модель можно дообучить на ваших документах.

  1. ПодберуМодель и размер под задачу и бюджет на железо
  2. ПоставлюНа ваш сервер или в закрытый контур, с API
  3. ДообучуНа ваших данных или подключу базу знаний
  4. ВстроюВ CRM, 1С, бота, сайт или рабочий чат
Обсудить внедрение