Die Modelle von Molmo verbinden visuelle Eingabe und Frage. In den unterstützten Optionen können Sie die Koordinaten des Objekts abfragen und in Molmo 2 auch mit Video arbeiten.
Eine Frage, die mit einem Punkt beantwortet werden kann
Auf einem Lagerfoto stehen zwei ähnliche Kartons. Beide als braun zu beschreiben hilft wenig, wenn jemand den oberen sucht. Molmo verarbeitet Bild und Anfrage gemeinsam und kann im unterstützten Modus die Position zurückgeben. Zeichnen Sie den Punkt zur Kontrolle ins Originalbild ein. Wenn Ihre Anwendung das Bild verkleinert oder zuschneidet, prüfen Sie vorab die Rückrechnung der Koordinaten.
Zwei Objekte und ein leeres Bild
Fotografieren Sie ein Regal mit zwei Kartons. Entfernen Sie dann den oberen und machen Sie ein zweites Foto. Stellen Sie zuerst eine Frage mit eindeutiger Ortsangabe. Wiederholen Sie dieselbe Frage für das zweite Bild. Prüfen Sie getrennt, ob das Modell den richtigen Karton findet und wie es reagiert, wenn dieser fehlt. Ergänzen Sie ein Bild, in dem ein Gegenstand den anderen verdeckt. Ein Punkt im sichtbaren Teil verrät nicht die Fläche des verdeckten Kartons.
So erweitern Sie die Überprüfung
Wenn Sie mehrere Frames beschriften möchten, wählen Sie eine Molmo-Variante, für die Ai2 Videounterstützung dokumentiert, und prüfen Sie die Zeitstempel. Speichern Sie Bildgröße, Anfrage und Version der Modellgewichte. Unterscheiden Sie Bildbeschreibungen, Koordinaten und genaue Konturen. Für Objektgrenzen brauchen Sie ein eigenes Verfahren. Prüfen Sie verschiedene Beleuchtungen und Blickwinkel. Erfassen Sie übersehene Objekte und falsche Positionsangaben getrennt.
Für welche Aufgaben geeignet
- Überprüfen Sie die Angabe des gewünschten Objekts unter ähnlichen
- Vergleichen Sie die Antworten auf Fragen zum Inhalt des Rahmens
Stärken
- Das Modell kann die Anzeige an den Standort des Objekts zurückgeben
- Ai2 veröffentlicht Gewichte und Launch-Beispiele
Einschränkungen
- Punkt gibt keine genaue Kontur des Objekts an
- Okklusion und ähnliche Gegenstände erfordern separate Inspektionen
Auswahl und Bedingungen
- Kostenlose Nutzung
- Ja
- Testphase
- Nicht bestätigt
- Keine Registrierung erforderlich
- Nicht bestätigt
- Russische Benutzeroberfläche
- Nicht bestätigt
- Lokale Installation
- Ja
- API
- Nicht bestätigt
„Nicht bestätigt“ bedeutet, dass nicht genügend Informationen vorliegen. Die Funktion kann dennoch verfügbar sein; prüfen Sie die Angaben des Entwicklers.
- Eingabeformate
- Bild, Text
- Ergebnis
- Daten, Text
Bedingungen
Die Bedingungen der verfügbaren Gewichte sind in der Karte des jeweiligen Modells angegeben. Ihre Ausrüstung oder verwaltete Berechnungen werden separat bezahlt. Der Punkt gibt keine genaue Kontur des Objekts an.Von der Aufgabe zum ersten Ergebnis
Praxisbeispiel
- Aufgabe
- Überprüfen Sie die Angabe des gewünschten Objekts unter ähnlichen
- Was Sie vorbereiten sollten
- Ein Foto von sich selbst mit zwei ähnlichen Kisten, von denen eine auf dem oberen Regal steht.
Aufgabenbeschreibung oder Prompt
Zeigen Sie die Box auf dem oberen Regal. Wenn der Gegenstand nicht sichtbar ist, verschieben Sie die Koordinaten nicht von einer anderen Box.
Erwartetes Ergebnis
Koordinaten, die Sie auf das Originalbild anwenden können, um zu überprüfen.
So prüfen Sie das Ergebnis
- Überprüfen Sie die Koordinatenkonvertierung, nachdem Sie die Bildgröße geändert haben.
- Überprüfen Sie das zweite Bild ohne die richtige Box.
Ein redaktionelles Lernbeispiel für eine Aufgabenbeschreibung, kein Ergebnis eines eigenen Praxistests des Dienstes. Prüfen Sie die Verfügbarkeit des benötigten Modus, die Rechte am Ausgangsmaterial und die Bedingungen für die Nutzung des Ergebnisses.
Details überprüfen
Offizielle Quellen
Die Beschreibung basiert auf den Materialien des Entwicklers. Die Funktionen, Preise und Verfügbarkeit können variieren. Bitte überprüfen Sie die Quelle vor der Verwendung.