Canonical: https://instain.ru/de/ai/ai2-molmo/ Language: de Ai2 Multimodales Modell für die Bildanalyse # Molmo. Visuelles Modell von Ai2, das auf Objekte im Bild zeigt 4.28 / 5 [Katalogbewertung](https://instain.ru/de/ai/ai2-molmo/#editorial-rating) [Offizielle Website ](https://allenai.org/molmo) Die Modelle von Molmo verbinden visuelle Eingabe und Frage. In den unterstützten Optionen können Sie die Koordinaten des Objekts abfragen und in Molmo 2 auch mit Video arbeiten. ![Ai2-Seite mit Übersicht über die visuellen Modelle von Molmo](https://instain.ru/assets/images/ai2-molmo-screen-a28a6af2dff3-1200.webp) Ai2-Seite mit Übersicht über die visuellen Modelle von Molmo. [Quelle öffnen ](https://allenai.org/molmo) ## Eine Frage, die mit einem Punkt beantwortet werden kann Auf einem Lagerfoto stehen zwei ähnliche Kartons. Beide als braun zu beschreiben hilft wenig, wenn jemand den oberen sucht. Molmo verarbeitet Bild und Anfrage gemeinsam und kann im unterstützten Modus die Position zurückgeben. Zeichnen Sie den Punkt zur Kontrolle ins Originalbild ein. Wenn Ihre Anwendung das Bild verkleinert oder zuschneidet, prüfen Sie vorab die Rückrechnung der Koordinaten. ## Zwei Objekte und ein leeres Bild Fotografieren Sie ein Regal mit zwei Kartons. Entfernen Sie dann den oberen und machen Sie ein zweites Foto. Stellen Sie zuerst eine Frage mit eindeutiger Ortsangabe. Wiederholen Sie dieselbe Frage für das zweite Bild. Prüfen Sie getrennt, ob das Modell den richtigen Karton findet und wie es reagiert, wenn dieser fehlt. Ergänzen Sie ein Bild, in dem ein Gegenstand den anderen verdeckt. Ein Punkt im sichtbaren Teil verrät nicht die Fläche des verdeckten Kartons. ## So erweitern Sie die Überprüfung Wenn Sie mehrere Frames beschriften möchten, wählen Sie eine Molmo-Variante, für die Ai2 Videounterstützung dokumentiert, und prüfen Sie die Zeitstempel. Speichern Sie Bildgröße, Anfrage und Version der Modellgewichte. Unterscheiden Sie Bildbeschreibungen, Koordinaten und genaue Konturen. Für Objektgrenzen brauchen Sie ein eigenes Verfahren. Prüfen Sie verschiedene Beleuchtungen und Blickwinkel. Erfassen Sie übersehene Objekte und falsche Positionsangaben getrennt. ## Für welche Aufgaben geeignet - Überprüfen Sie die Angabe des gewünschten Objekts unter ähnlichen - Vergleichen Sie die Antworten auf Fragen zum Inhalt des Rahmens Funktionen ## Stärken - Das Modell kann die Anzeige an den Standort des Objekts zurückgeben - Ai2 veröffentlicht Gewichte und Launch-Beispiele Zu berücksichtigen ## Einschränkungen - Punkt gibt keine genaue Kontur des Objekts an - Okklusion und ähnliche Gegenstände erfordern separate Inspektionen ## Auswahl und Bedingungen Kostenlose Nutzung Ja Testphase Nicht bestätigt Keine Registrierung erforderlich Nicht bestätigt Russische Benutzeroberfläche Nicht bestätigt Lokale Installation Ja API Nicht bestätigt „Nicht bestätigt“ bedeutet, dass nicht genügend Informationen vorliegen. Die Funktion kann dennoch verfügbar sein; prüfen Sie die Angaben des Entwicklers. Eingabeformate Bild, Text Ergebnis Daten, Text ### Bedingungen Die Bedingungen der verfügbaren Gewichte sind in der Karte des jeweiligen Modells angegeben. Ihre Ausrüstung oder verwaltete Berechnungen werden separat bezahlt. Der Punkt gibt keine genaue Kontur des Objekts an. Von der Aufgabe zum ersten Ergebnis ## Praxisbeispiel Aufgabe Überprüfen Sie die Angabe des gewünschten Objekts unter ähnlichen Was Sie vorbereiten sollten Ein Foto von sich selbst mit zwei ähnlichen Kisten, von denen eine auf dem oberen Regal steht. ### Aufgabenbeschreibung oder Prompt Zeigen Sie die Box auf dem oberen Regal. Wenn der Gegenstand nicht sichtbar ist, verschieben Sie die Koordinaten nicht von einer anderen Box. ### Erwartetes Ergebnis Koordinaten, die Sie auf das Originalbild anwenden können, um zu überprüfen. ### So prüfen Sie das Ergebnis - Überprüfen Sie die Koordinatenkonvertierung, nachdem Sie die Bildgröße geändert haben. - Überprüfen Sie das zweite Bild ohne die richtige Box. Ein redaktionelles Lernbeispiel für eine Aufgabenbeschreibung, kein Ergebnis eines eigenen Praxistests des Dienstes. Prüfen Sie die Verfügbarkeit des benötigten Modus, die Rechte am Ausgangsmaterial und die Bedingungen für die Nutzung des Ergebnisses. Details überprüfen ## Offizielle Quellen - [Offizielle Seite von Molmo ](https://allenai.org/molmo) - [Modellkarte Molmo 2 ](https://huggingface.co/allenai/Molmo2-8B) Die Beschreibung basiert auf den Materialien des Entwicklers. Die Funktionen, Preise und Verfügbarkeit können variieren. Bitte überprüfen Sie die Quelle vor der Verwendung. Das Tool im Überblick Entwickler Ai2 Kategorie [Code](https://instain.ru/de/category/code/) Zugang Wählen Sie das Modell mit der offiziellen Ai2-Karte und starten Sie die kompatible Verarbeitungsmethode. Überprüfen Sie für das Video die Anmeldeformate und Ressourcen der ausgewählten Option. Zahlung Die Bedingungen der verfügbaren Gewichte sind in der Karte des jeweiligen Modells angegeben. Ihre Ausrüstung oder verwaltete Berechnungen werden separat bezahlt. API Keine separate API angegeben [Entwicklerbedingungen ](https://huggingface.co/allenai/Molmo2-8B) Katalogbewertung 4.28 / 5 Funktionen 4.40 / 5 Arbeitsszenarien 4.00 / 5 Ökosystem 4.30 / 5 Dokumentation 4.40 / 5 Die Punkte dienen der Orientierung im Katalog. Sie sind weder Nutzerbewertungen noch Ergebnisse persönlicher Tests. [Siehe Methodik ](https://instain.ru/de/methodology/)