Canonical: https://instain.ru/ai/grounding-dino/
Language: ru

IDEA Research  модель обнаружения объектов по тексту

# Grounding DINO. 

Модель сопоставляет описание категории с рамками на изображении

4.23 / 5    [Оценка каталога](https://instain.ru/ai/grounding-dino/#editorial-rating) [Официальный сайт ](https://github.com/IDEA-Research/GroundingDINO)

Grounding DINO получает фотографию и фразу о предмете. Модель возвращает оценки совпадения и рамки, которые можно проверить на исходном кадре.

![Репозиторий IDEA Research с примерами обнаружения объектов](https://instain.ru/assets/images/grounding-dino-screen-65beb29e744b-1200.webp)

Репозиторий IDEA Research с примерами обнаружения объектов.  [Открыть источник ](https://github.com/IDEA-Research/GroundingDINO)

## Категория, которую можно назвать

На фотографии полки стоят красная кружка, банка и похожий на кружку стакан. Grounding DINO получает фразу о нужной категории и возвращает рамки, которые считает подходящими. Для первой проверки начните с короткого названия предмета из документации и наложите рамки на исходное изображение. Оцените попадания вручную. Высокая оценка еще не объясняет, какой признак модели оказался важен.

## Набор кадров для настройки порога

Снимите несколько вариантов полки. На одном нужный предмет хорошо виден, на другом закрыт соседним, на третьем отсутствует. Добавьте кадр с похожим по цвету предметом другой формы. Запустите модель с одной и той же фразой. Измените порог и сравните число пропусков и лишних рамок. В задаче предварительной разметки часть лишних рамок можно удалить вручную. Для автоматического учета ошибок нужен другой баланс.

Отдельно сохраните результат для кадра с несколькими кружками. Одно хорошее совпадение не показывает, нашла ли модель остальные.

## От результата к разметке

Если рамка нужна для последующей обработки, запишите размер входного изображения и способ пересчета координат. Для точного отделения предмета от фона понадобится разметка контура или модель сегментации. При изменении фразы сохраняйте результаты обеих формулировок и повторяйте контроль на пустом кадре. Это помогает заметить, что более широкое слово увеличило число совпадений за счет похожих предметов.

## Для каких задач подходит

- Найти на фото предметы, названные словами

- Сравнить пропуски и лишние рамки при разных порогах

Возможности 

## Сильные стороны

- Ищет объект по переданной фразе

- Разработчик публикует код, веса и примеры

Стоит учитывать 

## Ограничения

- Рамка описывает положение, а не контур

- Фраза и пороги могут изменить количество и качество совпадений

## Выбор и условия

Бесплатный режим

Да

Пробный период

Не подтверждено

Без регистрации

Не подтверждено

Русский интерфейс

Не подтверждено

Локальная установка

Да

API

Не подтверждено

«Не подтверждено» означает, что сведений недостаточно. Возможность может существовать; сверяйте условия разработчика.

Исходные форматы

Изображение, Текст

Результат

Данные

### Условия

Условия весов и кода указаны в официальном репозитории и модельной карточке. Свой или облачный запуск требует вычислительных ресурсов. Рамка описывает положение, а не контур.

От задачи к первому результату

## Практический пример

Задача

Найти на фото предметы, названные словами

Что подготовить

Учебные кадры полки с двумя видами предметов и кадр без нужного вида.

### Задание или запрос

Найди объекты категории red mug. Сохрани координаты, оценки и заданные пороги для каждого кадра.

### Ожидаемый результат

Проверяемые рамки и список пропусков и ложных совпадений.

### Как проверить результат

- Сравните похожие предметы по отдельности.

- Проверьте пустой кадр и изменение порога.

Редакционный учебный пример постановки задачи, а не результат личного тестирования сервиса. Проверьте доступность нужного режима, права на исходники и условия использования результата.

Проверить подробности

## Официальные источники

-  [Официальный репозиторий Grounding DINO ](https://github.com/IDEA-Research/GroundingDINO)

-  [Карточка Grounding DINO Base ](https://huggingface.co/IDEA-Research/grounding-dino-base)

Описание составлено по материалам разработчика. Возможности, цены и доступность могут меняться; перед использованием сверяйтесь с первоисточником.

Коротко об инструменте

Разработчик

IDEA Research

Категория

[Код](https://instain.ru/category/code/)

Доступ

Потребуются официальные веса, совместимая библиотека и достаточные вычислительные ресурсы. Начните с примера из репозитория разработчика.

Оплата

Условия весов и кода указаны в официальном репозитории и модельной карточке. Свой или облачный запуск требует вычислительных ресурсов.

API

Отдельный API не указан

[Условия разработчика ](https://huggingface.co/IDEA-Research/grounding-dino-base)

Оценка каталога

4.23 / 5 

Возможности

4.40 / 5 

Рабочие сценарии

4.00 / 5 

Экосистема

4.30 / 5 

Документация

4.20 / 5 

Баллы — ориентир каталога. Они не являются отзывами пользователей или результатом личного тестирования.

[Посмотреть методологию ](https://instain.ru/methodology/)