Konuşan avatar ve dudak senkronu

LUVI'de bir portreyi konuşturabilir, hazır bir videoya da yeni bir ses verebilirsiniz. İkisini de dudak senkronu yapan modeller üstlenir.

Model listesinde "lipsync" diye aratın. Görselle sesi birleştiren modeller konuşan bir avatar üretir; videoyla sesi birleştirenler ise videodaki dudakları yeni sese uydurur.

Önce konuşan avatar. Bu örnekte OmniHuman bir nokta beş modelini seçiyoruz.

Referans bölümünde iki yuva açılır: biri görsel, diğeri ses dosyası için. İkisi de zorunlu.

Görsel yuvasına yüzü net görünen bir portre koyun. Kütüphanede sağ tıklayıp Referans Olarak Kullan'ı seçmeniz yeterli.

Ses dosyanız yoksa onu da LUVI'de, metni sese çeviren bir modelle üretebilirsiniz; bu konuşmayı biz de öyle hazırladık. Ses de aynı yoldan kendi yuvasına geçer.

Videonun süresi, sesin süresi kadar olur; OmniHuman en fazla altmış saniyelik ses alır. Ücret de sesin saniyesine göre hesaplanır ve iki yuva dolunca görünür.

Prompt'a duyguyu, tempoyu ve konuşma tarzını yazın. Biz sıcak bir ses tonuyla, gülümseyerek ve kameraya bakarak konuşmasını istedik.

Oluştur'a basın. Sonuç, verdiğiniz sesle konuşan bir video olarak kütüphanenize gelir.

Şimdi aynı videoya yeni bir ses verelim, mesela İngilizcesini. Bunun için Sync Lipsync modelini seçiyoruz; daha ekonomik bir seçenek de VEED Lipsync.

Bu modellerde yuvalar video ve ses dosyasıdır; prompt yazılmaz. Videoyu ve yeni sesi yerleştirin; ikisi de en fazla altmış saniye olabilir.

Ücret burada da sesin saniyesine göre hesaplanır. Oluştur'a bastığınızda dudaklar yeni sese göre yeniden senkronlanır.

Kısacası: konuşan avatar için bir görsel ve bir ses, yeni bir ses için de bir video ve bir ses verin. Ücreti de sesin uzunluğu belirler.