Les modèles Molmo combinent entrée visuelle et question. Dans les options prises en charge, vous pouvez demander les coordonnées de l'objet, et dans Molmo 2 fonctionne également avec la vidéo.
Une question à laquelle on peut répondre par un point
Sur la photo de l'entrepôt, deux boîtes similaires. La description des deux comme brun peu d'aide si l'opérateur a besoin supérieur. Molmo peut traiter l'image et la requête ensemble, tandis que le mode d'indexation pris en charge renvoie la position de l'objet. Pour vérifier, appliquez le point obtenu sur la photo originale et assurez-vous qu'il est dans la zone souhaitée. Si le cerclage réduit ou recadre l'image, vérifiez à l'avance la conversion des coordonnées.
Deux objets et un cadre vide
Enlevez l'étagère avec deux boîtes, puis retirez le haut. Pour la première image, posez une question avec une indication claire de l'emplacement. Pour le second, répétez-le sans changement. Évaluez séparément si le modèle trouve la boîte souhaitée et comment il se comporte en son absence. Il est utile d'ajouter une image où un objet en ferme un autre. Même frapper un point dans la partie visible n'explique pas la zone occupée par la boîte cachée.
Comment étendre la vérification
Si vous avez besoin de marquer plusieurs images, sélectionnez l'option Molmo pour laquelle Ai2 documente le travail avec la vidéo et vérifiez les images au fil du temps. Enregistrez la taille d'origine, le libellé de la requête et la version de la balance. Séparez les réponses sur le contenu du cadre, les coordonnées et le contour exact. Pour les frontières, une méthode distincte est nécessaire. Ajoutez à la vérification des images avec un éclairage et une perspective différents afin que la bonne réponse sur la première photo ne devienne pas la seule raison de choisir. Notez le nombre d'omissions séparément du nombre d'instructions incorrectes.
Pour quelles tâches convient-il
- Vérifier l'indication de l'objet souhaité parmi les objets similaires
- Répondre aux questions sur le contenu du cadre
Les points forts
- Le modèle peut renvoyer l'emplacement de l'objet
- Ai2 publie des poids et des exemples de lancement
Limites
- Le point ne définit pas le contour exact de l'objet
- L'occlusion et les objets similaires nécessitent des contrôles séparés
Choix et conditions
- Mode gratuit
- Oui
- Période d'essai
- Non confirmé
- Sans inscription
- Non confirmé
- Interface en russe
- Non confirmé
- Installation locale
- Oui
- API
- Non confirmé
« Non confirmé » signifie que les informations disponibles ne suffisent pas. La fonctionnalité peut exister ; vérifiez les conditions du développeur.
- Formats d’entrée
- Image, Texte
- Résultat
- Données, Texte
Conditions
Les conditions de la balance disponible sont indiquées sur la carte du modèle correspondant. Leur matériel ou leurs calculs managés sont payés séparément. Le point ne définit pas le contour exact de l'objet.De la tâche au premier résultat
Exemple pratique
- Tâche
- Vérifier l'indication de l'objet souhaité parmi les objets similaires
- Que préparer
- Sa photo avec deux boîtes similaires, dont l'une se trouve sur l'étagère supérieure.
Consigne ou requête
Pointez la boîte sur l'étagère supérieure. Si l'objet n'est pas visible, ne déplacez pas les coordonnées d'une autre boîte.
Résultat attendu
Les coordonnées que vous pouvez appliquer à la trame de base pour la vérification.
Comment vérifier le résultat
- Vérifiez la conversion des coordonnées après avoir redimensionné l'image.
- Vérifiez la deuxième image sans la boîte nécessaire.
Cet exemple pédagogique préparé par la rédaction décrit une tâche ; il ne présente pas le résultat d’un test personnel du service. Vérifiez la disponibilité du mode requis, les droits sur les fichiers d’origine et les conditions d’utilisation du résultat.
Vérifier les détails
Sources officielles
La description est faite à partir des matériaux du développeur. Les fonctionnalités, les prix et la disponibilité peuvent varier; vérifiez la source avant de l'utiliser.