EPFL, HUAWEI Bayer Lab und University of Bologna Modell

Marigold.

Tiefe, Oberflächennormalen und Albedo aus einem Bild

4.40 / 5Katalogbewertung
Offizielle Website

Eine Familie von Computer-Vision-Modellen. Verschiedene Marigold V2-Checkpoints schätzen Tiefe, Oberflächennormalen oder Albedo aus einem Bild.

Marigold. Das Marigold V2-Repository mit einer Liste von Vorhersagen und Startbeispielen.
Das Marigold V2-Repository mit einer Liste von Vorhersagen und Startbeispielen. Quelle öffnen

Die Tiefenkarte als Orientierungspunkt für die Installation

Marigold schätzt, welche Bildbereiche näher an der Kamera liegen. In der zweiten Version lässt sich ein anderer Checkpoint wählen, um die Ausrichtung einer Oberfläche oder ihre Farbe ohne direkten Einfluss der Beleuchtung zu schätzen. Die relative Tiefe hilft, Vorder- und Hintergrund zu trennen. Normalen zeigen die Neigung sichtbarer Flächen. Aus einem einzelnen Foto lassen sich Maßstab und Abstände in Metern nicht bestimmen.

Rahmenprüfung mit Vitrine

Nehmen Sie Ihr eigenes Bild von der Vitrine, wo die vordere Theke überdeckt das Regal, und hinter dem Glas ist ein Hintergrund zu sehen. Schätzen Sie zunächst die Gesamttiefe und vergleichen Sie die Reihenfolge der Pläne mit dem Quellcode. Dann bringen Sie die Grenze des Gestells, die dünne Stütze und den Glanz auf dem Glas näher. Wenn Sie die Oberfläche hinter dem Glas bewerten möchten, überprüfen Sie den speziellen Kontrollpunkt in der Dokumentation. Seine Schlussfolgerung sollte mit einer normalen Karte verglichen werden, ohne sich nur auf die Farbe der Visualisierung zu verlassen.

Speichern Sie das Originalfoto und das Vorhersagearray in der Nähe. Das Farbbild ist bequem zu sehen, und das Array ist nützlich bei der Vorbereitung der Maske.

Einen Lauf reproduzierbar machen

Das offizielle Repository beschreibt den Start auf Linux mit CUDA und warnt vor Speicheranforderungen, die mit der Auflösung wachsen. Beginnen Sie mit einem kleinen Satz von Fotos aus Ihrer Aufgabe. Speichern Sie die Parameter und den Namen des Kontrollpunktes. Dadurch wird deutlich, ob der Unterschied der Ergebnisse mit dem Blickwinkel, der Bildgröße oder dem ausgewählten Modell zusammenhängt. Überprüfen Sie separat die Bedingungen für die Verwendung von Basis- und Zusatzgewichten.

Für welche Aufgaben geeignet

  • Bewerten Sie die Reihenfolge der Objekte im Rahmen
  • Bereiten Sie einen Leitfaden für die Maske in der Tiefe vor
Funktionen

Stärken

  • Einzelne Gewichte für Tiefe, Normal und Albedo
  • Numerisches Array und Visualisierung der Vorhersage
Zu berücksichtigen

Einschränkungen

  • Die relative Karte gibt keinen Abstand in Metern
  • Glas, Spiegel und Grenzen erfordern manuelle Inspektion

Auswahl und Bedingungen

Kostenlose Nutzung
Nicht bestätigt
Testphase
Nicht bestätigt
Keine Registrierung erforderlich
Nicht bestätigt
Russische Benutzeroberfläche
Nicht bestätigt
Lokale Installation
Ja
API
Nicht bestätigt

„Nicht bestätigt“ bedeutet, dass nicht genügend Informationen vorliegen. Die Funktion kann dennoch verfügbar sein; prüfen Sie die Angaben des Entwicklers.

Eingabeformate
Bild
Ergebnis
Tiefenkarte, Bild

Bedingungen

Die Autoren veröffentlichen Code, Checkpoints und eine Demonstration. Die dokumentierte lokale Installation der zweiten Version verwendet Linux und eine Grafikkarte mit CUDA.

Von der Aufgabe zum ersten Ergebnis

Praxisbeispiel

Aufgabe
Bewerten Sie die Reihenfolge der Objekte im Rahmen
Was Sie vorbereiten sollten
Ein Schnappschuss mit einem klaren Vordergrund und mehreren Objekten aus verschiedenen Entfernungen.

Aufgabenbeschreibung oder Prompt

Erstellen Sie eine Tiefenkarte und vergleichen Sie die gegenseitige Position der Objekte mit dem Originalbild. Lassen Sie die Quelle unverändert.

Erwartetes Ergebnis

Tiefenkarte zur visuellen Überprüfung.

So prüfen Sie das Ergebnis

  • Prüfen Sie Nah- und Fernobjekte.
  • Schauen Sie sich die transparenten Oberflächen und dünnen Konturen separat an.

Ein redaktionelles Lernbeispiel für eine Aufgabenbeschreibung, kein Ergebnis eines eigenen Praxistests des Dienstes. Prüfen Sie die Verfügbarkeit des benötigten Modus, die Rechte am Ausgangsmaterial und die Bedingungen für die Nutzung des Ergebnisses.

Details überprüfen

Offizielle Quellen

  1. Marigold V2 Modelle und Startanleitung
  2. Die Autoren von Marigold V2
  3. Offizielles Projekt der ersten Version von Marigold

Die Beschreibung basiert auf den Materialien des Entwicklers. Die Funktionen, Preise und Verfügbarkeit können variieren. Bitte überprüfen Sie die Quelle vor der Verwendung.