Веса Nomic Embed позволяют получить числовые представления текста. У описанных вариантов можно уменьшить размерность вектора и проверить влияние на свой поиск.
Зачем пробовать меньший вектор
В учебном каталоге заметок может понадобиться меньше места под индекс. Некоторые варианты Nomic Embed позволяют получить вектор меньшей размерности. Сначала зафиксируйте исходную модель и набор фрагментов. Соберите две версии индекса и проверьте один и тот же список вопросов. Меньшая размерность влияет не только на хранение. Она может изменить порядок соседних результатов, и это важно там, где пользователь видит лишь первые строки.
Не меняйте подготовку текста посередине
В карточках указано, как различать роль поискового запроса и роль документа. Используйте эти правила и при первой загрузке, и при обновлении индекса. Если меняется режим или размерность, храните индексы раздельно. Длинное руководство лучше заранее делить на фрагменты и связывать каждый вектор с исходным абзацем. Иначе даже правильное совпадение трудно проверить.
Сравнение на похожих вопросах
Возьмите несколько пар запросов, которые отличаются одним условием. Например, один вопрос относится к черновику правил, другой к действующей версии. Проверьте, не вытеснил ли похожий, но устаревший текст нужный фрагмент. Измерьте размер готового индекса и повторите проверку на новых запросах. Если уменьшение размерности заметно портит первые результаты, запишите конкретные случаи и решите, что важнее для этой базы. Отдельно проверьте пограничный случай с длинным запросом и коротким ответом из источника. Убедитесь, что ссылка ведет к нужному абзацу.
Для каких задач подходит
- Сравнить выдачу полного и сокращенного вектора
- Проверить поиск по своим заметкам и документам
Сильные стороны
- У ряда вариантов есть документированная настройка размерности
- Карточки Nomic показывают разделение запросов и документов
Ограничения
- Сокращение вектора может изменить порядок выдачи
- Допустимая длина текста зависит от выбранной версии
Выбор и условия
- Бесплатный режим
- Да
- Пробный период
- Не подтверждено
- Без регистрации
- Не подтверждено
- Русский интерфейс
- Не подтверждено
- Локальная установка
- Да
- API
- Не подтверждено
«Не подтверждено» означает, что сведений недостаточно. Возможность может существовать; сверяйте условия разработчика.
- Исходные форматы
- Текст
- Результат
- Эмбеддинг
Условия
Веса опубликованы с лицензиями, указанными в карточках. Расходы на размещение модели и хранение индекса зависят от выбранной среды. Сокращение вектора может изменить порядок выдачи.От задачи к первому результату
Практический пример
- Задача
- Сравнить выдачу полного и сокращенного вектора
- Что подготовить
- Два коротких своих текста и несколько поисковых вопросов на одном языке.
Задание или запрос
Рабочее задание для приложения: получить эмбеддинги текстов и запросов, сохранить связь каждого вектора с исходным фрагментом и сравнить близость. Для найденного фрагмента показать исходник; сама модель эмбеддингов не пишет ответ.
Ожидаемый результат
Числовые представления и проверяемая выдача похожих фрагментов, если поиск реализован в приложении.
Как проверить результат
- Проверьте связь результата с исходным текстом.
- Сопоставляйте векторы одной модели и размерности; отрицания и межъязыковой поиск проверяйте отдельно.
Редакционный учебный пример постановки задачи, а не результат личного тестирования сервиса. Проверьте доступность нужного режима, права на исходники и условия использования результата.
Проверить подробности
Официальные источники
Описание составлено по материалам разработчика. Возможности, цены и доступность могут меняться; перед использованием сверяйтесь с первоисточником.
