Sesten yüz animasyonu için modeller ve SDK. Çıktı, hazırlanmış üç boyutlu karakterin yüz formlarını kontrol eder.
Ses rayı yüzü hareket ettirir
Audio2Face-3D, konuşmayı analiz eder ve yüz animasyonunun parametrelerini, örneğin yüz formlarının ağırlıklarını oluşturur. Model, seçilen SDK veya entegrasyon yoluyla hazırlanan karaktere uygulanır. İşlemeden önce, karakterin gerekli ağız şekillerine sahip olup olmadığını ve modelin çıktısıyla nasıl ilişkili olduklarını kontrol edin. Yüz ifadelerine sahip bir dosya kendi başına karakter modelinin, sahnenin ve render'ın yerini almaz.
Kısa karakter replikası olan bir örnek
Bir eğitim kahramanı ve bir satırın izin verilen bir kaydını hazırlayın, burada dudak ünsüzleri ile cümleden sonra bir duraklama olur. İşlemi başlatın ve parametreleri donanıma aktarın. İlk olarak, duraklamanın başında ağzınızın kapanıp kapanmadığına bakın. Ardından, çenenin yan tarafındaki bireysel sesleri ve hareketi kontrol edin. Dudaklar doğru şekilde kapanıyorsa ve yüz aşırı hareket ediyorsa, tüm diyaloğu işlemeden önce şekil aktarımı ayarlarını düzeltin.
Sesi, model parametrelerini ve manuel düzenlemeleri ayrı tutun. Bu, kopyayı yeniden yüklemeden donanım sürümünü değiştirmenize izin verir.
Geçerli bir seçenek nasıl seçilir
NVIDIA deposunda açık sürümün modelleri ve çalıştırma araçları yer alır. Eğitim çerçevesi ayrı belgelenmiştir. Geliştiricinin kataloğunda eski barındırılan hizmetlerin sayfaları da bulunabilir. Yeni bir proje için açık bileşenlerin açıklamalarına, sürümlerine ve gereksinimlerine bakın. Son video gerekiyorsa dışa aktarmayı ve görüntü kalitesini kendi motorunuzda veya düzenleyicinizde kontrol edin. Animasyonu projenizdeki kare hızında inceleyin.
Hangi görevler uygun
- Bir sesi öğrenen bir 3D karaktere bağlamak
- Yüz ifadelerinin kendi donanımınıza aktarımını kontrol edin
Güçlü yönler
- Ağırlıkları aç ve entegrasyon için ayrı SDK
- Yüz parametrelerinin ses tarafından üretilmesi
Sınırlamalar
- Çıkış için uyumlu bir donanım ve transfer ayarı gerekir
- Artikülasyon ve yüz ifadeleri karakter üzerinde doğrulama gerektirir
Seçim ve koşullar
- Ücretsiz kullanım
- Doğrulanmadı
- Deneme süresi
- Doğrulanmadı
- Kayıt gerektirmez
- Doğrulanmadı
- Rusça arayüz
- Doğrulanmadı
- Yerel kurulum
- Evet
- API
- Evet
“Doğrulanmadı”, yeterli bilgi bulunmadığı anlamına gelir. Özellik mevcut olabilir; geliştiricinin koşullarını kontrol edin.
- Girdi biçimleri
- Ses
- Sonuç
- Animasyon
Koşullar
NVIDIA açık ağırlıkları ve araçları ayrı bir depoda yayınlar. Uyumluluk seçilen ortama, SDK ve entegrasyon yöntemine bağlıdır.Görevden ilk sonuca
Uygulama örneği
- Görev
- Bir sesi öğrenen bir 3D karaktere bağlamak
- Ne hazırlamalısınız?
- Kendi kısa çizgisi ve bir dizi ağız şekliyle dijital karakter hazırladı.
Görev veya istem
Çizgiyi karaktere bağlayın ve ağzın kapandığı anları kontrol edin. Orijinal ses parçasını kaydet.
Beklenen sonuç
Konuşulan çizginin siyah animasyonu.
Sonuç nasıl kontrol edilir
- Kelimelerin başlangıcını ağzın hareketiyle kontrol edin.
- Duraklamalarda gözle görülür hataları manuel olarak düzeltin.
Bu, görevin nasıl tanımlanabileceğini gösteren editoryal bir eğitim örneğidir; servisi bizzat test ederek elde edilmiş bir sonuç değildir. Gerekli modun kullanılabilirliğini, kaynak dosyalar üzerindeki hakları ve sonucun kullanım koşullarını kontrol edin.
Ayrıntıları kontrol et
Resmi kaynaklar
- Modellere ve SDK'lara bağlantılar içeren NVIDIA deposu
- Yüz animasyonunun modeli, eğitimi ve formatları
- NVIDIA yüz animasyonu üzerinde ses ile çalışma
Açıklama geliştiricinin materyallerine dayanmaktadır. Fırsatlar, fiyatlar ve kullanılabilirlik değişebilir; kullanımdan önce orijinal kaynağa bakın.
