Meta AI Modell

MusicGen.

Musik aus Text und einer Melodievorlage

4.43 / 5Katalogbewertung
Offizielle Website

Modell der AudioCraft-Familie zum Erstellen von Musikfragmenten nach Beschreibung. Die Melody-Varianten berücksichtigen zusätzlich den melodischen Bezugspunkt.

MusicGen. AudioCraft-Handbuch mit Beispielen für den Start und Versionen von MusicGen.
AudioCraft-Handbuch mit Beispielen für den Start und Versionen von MusicGen. Quelle öffnen

Wo ist ein musikalischer Trick nützlich

MusicGen erzeugt ein Audio-Snippet nach Textbeschreibung. Mit den Melody-Optionen können Sie einen musikalischen Bezugspunkt hinzufügen, z. B. Ihre eigene einfache Melodie. Die AudioCraft-Dokumentation für diese beiden Modi enthält verschiedene Herausforderungen. Bevor Sie beginnen, entscheiden Sie, was für den Entwurf, die vorgegebene Art des Klangs oder die erkennbare Kontur Ihres Motivs wichtiger ist. Das Modell hat keine Spuren, die separat als Bass oder Schlagzeug bearbeitet werden können.

Bildschirmschoner für Trainingswalze

Versuchen Sie für einen kurzen Film über die Arbeit mit einem Baum, eine leise Begleitung mit weichen Tasten und seltenen Perkussionsschlägen zu beschreiben. Speichern Sie ein paar Optionen und hören Sie sie unter dem Anfang des Videos, wo die Stimme klingt. Wenn die Begleitung die gleichen Frequenzen wie die Sprache einnimmt, ändern Sie die Option oder bearbeiten Sie den Ton im Editor. Für den melodischen Modus können Sie Ihr eigenes Motiv aufzeichnen und vergleichen, welche Merkmale zu hören sind.

Überprüfen Sie den letzten Takt. Bei einer zyklischen Wiederholung gibt sich der Übergang aus, wenn plötzlich ein neuer Akzent an der Kreuzung erscheint oder eine lange Note abbricht.

Code und Gewichte haben unterschiedliche Bedingungen

Meta gibt separat die Codelizenz und die Waagenlizenz an. Überprüfen Sie für eine lokale Lernprobe die Installation von AudioCraft und den verfügbaren Speicher, und überprüfen Sie vor der Freigabe die zulässigen Methoden zur Verwendung bestimmter Gewichte. Die Auswahl eines Fragments für ein kommerzielles Video ist riskant, nur weil der Code öffentlich verfügbar ist. Es ist besser, das Ergebnis in der Montagesequenz selbst zu bewerten, wo das Verhältnis von Stimme, Musik und anderen Geräuschen zu hören ist.

Für welche Aufgaben geeignet

  • Holen Sie sich eine musikalische Skizze für die Installation
  • Begleitung mit eigenem Motiv
Funktionen

Stärken

  • Generierung nach Beschreibung des Genres und der Zusammensetzung der Instrumente
  • Einzelne Versionen mit melodischer Ausrichtung
Zu berücksichtigen

Einschränkungen

  • Veröffentlichte Gewichte haben eine nichtkommerzielle Lizenz
  • Generiertes Fragment erfordert Musikmontage

Auswahl und Bedingungen

Kostenlose Nutzung
Ja
Testphase
Nicht bestätigt
Keine Registrierung erforderlich
Nicht bestätigt
Russische Benutzeroberfläche
Nicht bestätigt
Lokale Installation
Ja
API
Nicht bestätigt

„Nicht bestätigt“ bedeutet, dass nicht genügend Informationen vorliegen. Die Funktion kann dennoch verfügbar sein; prüfen Sie die Angaben des Entwicklers.

Eingabeformate
Text, Audio
Ergebnis
Audio

Bedingungen

Code und Gewichte sind in AudioCraft verfügbar. Beispiele für den lokalen Start werden für Python und PyTorch beschrieben, die Anforderungen hängen von der gewählten Version des Modells ab.

Von der Aufgabe zum ersten Ergebnis

Praxisbeispiel

Aufgabe
Holen Sie sich eine musikalische Skizze für die Installation
Was Sie vorbereiten sollten
Ein eigener Text oder eine Beschreibung eines Musikstücks, ohne einen bestimmten Künstler nachzuahmen.

Aufgabenbeschreibung oder Prompt

Ein ruhiges Instrumentalstück für das Intro einer Werkstatt: sanfte Keyboardklänge, leise Perkussion, warme Stimmung, ohne Gesang oder erkennbare Melodien anderer Künstler.

Erwartetes Ergebnis

Eine musikalische Skizze, die angehört und anhand der Nutzungsbedingungen des Dienstes geprüft werden muss.

So prüfen Sie das Ergebnis

  • Überprüfen Sie Anfang, Ende und Übergänge.
  • Setzen Sie eine kostenlose Generierung nicht mit der Erlaubnis zur kommerziellen Veröffentlichung gleich.

Ein redaktionelles Lernbeispiel für eine Aufgabenbeschreibung, kein Ergebnis eines eigenen Praxistests des Dienstes. Prüfen Sie die Verfügbarkeit des benötigten Modus, die Rechte am Ausgangsmaterial und die Bedingungen für die Nutzung des Ergebnisses.

Details überprüfen

Offizielle Quellen

  1. MusicGen-Handbuch und Versionsliste
  2. AudioCraft-Code und Bedingungen für Code und Gewichte
  3. Beschreibung der AudioCraft-Familie von Meta

Die Beschreibung basiert auf den Materialien des Entwicklers. Die Funktionen, Preise und Verfügbarkeit können variieren. Bitte überprüfen Sie die Quelle vor der Verwendung.