Lip-Sync ist die Funktion von Dubly.AI, die den Mund des Sprechers neu animiert, damit er zum übersetzten Audio passt. Das Ergebnis: ein gedubtes Video, das aussieht, als wäre es in der Zielsprache gefilmt worden.
Worauf Lip-Sync synchronisiert
Lip-Sync gleicht den Mund immer an das von Dubly erzeugte gedubte Audio dieses Subdubs an. Daraus folgen zwei Dinge:
Du kannst in der App kein eigenes Audio mitgeben. Im Standardablauf gibt es keinen Upload für eine eigene Voice-over- oder Dub-Tonspur (MP3, WAV, M4A), auf die Lip-Sync das Video synchronisieren würde. Wenn dein Projekt eine bereits fertige Tonspur mitbringt, frag Dubby im Chat: Für einzelne Projekte prüft unser Team auf Anfrage, was wir für dich möglich machen können.
Es gibt keinen reinen Lip-Sync-Modus. Lip-Sync ist ein Schritt innerhalb eines Dubs und läuft erst, wenn das Dubben fertig ist – eine Übersetzung in eine Zielsprache passiert also immer zuerst.
Was das in der Praxis bedeutet – und warum es auch nicht hilft, das eigene Audio vorher ins Video zu mischen – steht in Einschränkungen und Workarounds bei Lip-Sync.
Wann du Lip-Sync verwenden solltest
Lip-Sync wird empfohlen, wenn:
Der Sprecher auf der Kamera sichtbar ist (Interview, Selfie-Video, Präsentatoraufnahme)
Der Mund für den Großteil der Aufnahme deutlich sichtbar ist
Du das hochwertigste, „nativ wirkende" Ergebnis möchtest
Das Video mindestens 10 Sekunden klares, unverdecktes Filmmaterial des Gesichts des Sprechers enthält, damit die AI den Lip-Sync präzise verarbeiten kann.
Lip-Sync ist nicht notwendig für Voice-over-Inhalte, bei denen der Sprecher außerhalb des Bildschirms ist (Screencasts, Produkt-Touren, Animationen).
Verwandte Artikel
Wann solltest du Lip-Sync aktivieren? — der vollständige Entscheidungsrahmen.
Einschränkungen und Workarounds bei Lip-Sync — Voraussetzungen und Grenzen im Detail.