דיבוב וידאו עם AI, שפתיים בסנכרון

וידאו שבו מישהו מדבר, קול חדש בשפה אחרת: Sync Lipsync 3 מסנכרן מחדש את השפתיים לטקסט החדש. אותו צילום באנגלית ובספרדית, בלי לצלם מחדש. תהליך העבודה כולו נראה לעיניים בלי חשבון.

הסרטון המקורי: אדם אחד מול המצלמה, מדבר באנגלית, צילום סטטידמו אינטראקטיבי

workflow אמיתי, תוצאות אמיתיות. הזיזו והתקרבו כרצונכם.

שימוש ב-workflow הזה

תהליך העבודה בפועל: הווידאו של האווטאר בנוד Media, שני תרגומים שכל אחד מהם מוקרא על ידי נוד Voice-over, ושני נודים מסוג Video מוגדרים ל-Sync Lipsync 3 שמקבלים את הווידאו בפורט הווידאו ואת הקול בפורט הקול.

בקצרה

אתם מספקים
סרטון 1 · טקסט או בריף
מה ה-workflow מפיק
2 סרטונים של 12 שניות ב-720p, יחס 9:16 · 2 קריינויות
מבנה הקנבס
8 נודים המחוברים ב-6 קשרים
מודלים מחווטים
ElevenLabs v3, Sync Lipsync 3
עלות של מעבר מלא
בערך 200 קרדיטים, כלומר ‏2.40 ‏$
חשבון
ניתן לראות את ההדגמה בלי חשבון; ליצירה נדרש חשבון חינמי, כולל קרדיטים לניסיון

וידאו שצולם פעם אחת, ומופק בכל השפות הדרושות: זה מה שדיבוב עם סנכרון שפתיים עושה. האדם על המסך לא אומר יותר את המשפט המקורי, הוא אומר את התרגום, והפה שלו עוקב אחרי הקול החדש פריים אחר פריים. הפנים, התאורה והמסגור נשארים כמו בצילום המקורי.

הטקסט המתורגם מוקרא בנוד Voice-over, עם קול מהקטלוג או קול מוקלן, שלכם לדוגמה. נוד ה-Video המוגדר ל-Sync Lipsync 3 מקבל את הווידאו ואת הקול, ומרנדר את הצילום המדובב. המחיר עוקב אחרי משך הזמן שהופק, נמדד על שני הקבצים שלכם, ומוצג לפני שלוחצים.

ההדגמה מתחילה מהווידאו של האווטאר המדבר, בצרפתית, ומפיקה אותו באנגלית ואז בספרדית. פרסומת, וידאו הכשרה פנימי, מצגת מוצר: צילום אחד, קובץ אחד לכל שוק.

תוצרים אמיתיים מההדגמה

אלה הקבצים של ה-workflow שמעל, כפי שהמודלים הפיקו אותם, בלי עיבוד נוסף. נקודת הפתיחה מוצגת כשיש כזו.

נקודת פתיחה

הווידאו המדובר שלך

תוצר

קריינות באנגלית שנוצרה על ידי ElevenLabs מהטקסט המקורינוצר עם ElevenLabs v3
אותה משפט מתורגם ומבוצע בספרדיתנוצר עם ElevenLabs v3
הסרטון מדובב לאנגלית, שפתיים מסונכרנות מחדש על ידי Sync Lipsync 3נוצר עם Sync Lipsync 3
אותו סרטון מדובב לספרדית: אותו צילום, אותן תנועות, שפתיים מותאמות לשפה החדשהנוצר עם Sync Lipsync 3

אילו קבצים לספק

קובץ mp4 שבו אדם אחד מדבר מול המצלמה, הפה גלוי מתחילת הסרטון ועד סופו, סאונד נקי.

איך עושים את זה

  1. 1

    טעינת הווידאו המדובר

    פרצוף מצולם מהחזית, מוארת היטב, פה גלוי, בלי יד או מיקרופון מלפניו. עד שתי דקות למעבר. צילום שצולם בטלפון מתאים.

  2. 2

    כתיבת התרגום ובחירת הקול

    כל נוד Voice-over מקריא טקסט בשפה אחת. בחרו קול הקרוב לדמות, או שכפלו את הקול שלה כדי לשמור על הצליל שלה משפה לשפה.

  3. 3

    הגדרת ההתאמה בין משכי הזמן

    כברירת מחדל, התוצאה מפסיקה בקצר משני משכי הזמן. אם הקול חורג מהצילום, בחרו ב"לופ": הווידאו חוזר על עצמו מתחת לקול, מה שעובד היטב בשוט ישיר למצלמה.

  4. 4

    יצירה והשוואה

    נוד אחד לכל שפה, כולם מחוברים לאותו הווידאו. המחיר של כל אחד עוקב אחרי משך הזמן שלו. הריצו מחדש רק את השפה שלא אהבתם.

וריאציות ותרחישי שימוש

אותו קנבס, מכוון לצרכים שונים: כל וריאציה מסתכמת בשתיים-שלוש שורות פרומפט להחלפה.

הפרסומת בחמש שפות

פרסומת שצולמה בצרפתית הופכת לחמישה קבצים: נוד Voice-over אחד לכל שפה, נוד Sync Lipsync 3 אחד לכל שפה, אותו וידאו בכניסה. התקציב נראה על כל כפתור לפני ההפעלה.

וידאו ההכשרה המתורגם

מדריך מצולם ישירות למצלמה, הטקסט מתורגם על ידי נוד Text, מוקרא על ידי נוד Voice-over, והווידאו מדובב לצוותים בחוץ לארץ. העריכה נשארת אותה.

תיקון משפט בלי לצלם מחדש

דיבוב משמש גם באותה שפה: משפט שנאמר בטעות, מחיר שהשתנה, שם לתיקון. שכתבו את הטקסט, הריצו מחדש, הפה עוקב.

עדות לקוח עם כתוביות, ואז מדובבת

עדות אמינה זוכה בקהל זר בלי לאבד את פני האדם: דבבו אותה בקול קרוב, ושמרו על הכתוביות לצורך נגישות.

האווטאר המופק בכל השפות

התחילו מוידאו שהופק על ידי האווטאר המדבר או על ידי פרסומת UGC, ודבבו אותו: הדמות המסונתטת מדברת בכל שפה בלי להפיק מחדש את הצילום.

תמונה במקום וידאו

אם אין לכם וידאו התחלתי, הפכו תמונה לדוברת: InfiniTalk מייצר את תנועת הפנים מפורטרט וקול.

טעויות נפוצות

וידאו עם כמה פרצופים

המודל מסנכרן פרצוף אחד. עם שני אנשים על המסך, התוצאה לא צפויה. מסגרו את זה שמדבר.

קול הרבה יותר ארוך מהצילום

במצב חתך, התוצאה מפסיקה עם הווידאו וסוף הטקסט נעלם. קצרו את התרגום או עברו למצב לופ.

פה מוסתר במהלך הצילום

יד, מיקרופון, כוס: כל דבר שעובר מלפני הפה שובר את הסנכרון בפריימים האלה. השאירו את הפנים פתוחות בצילום.

לשכוח את המוזיקה והאווירה

התוצאה מכילה רק את הקול. החזירו את המוזיקה לנוד Montage, אחרת הגרסה המדובבת נשמעת חשופה יותר מהמקור.

מה ה-workflow הזה משנה, ומה הוא לא משנה

הוא יכול

  • להחליף את הקול לשפה אחרת על אותו צילום
  • לסנכרן מחדש את השפתיים עם הרצועה החדשה
  • לשמור על התנועות, התפאורה והמסגור

הוא לא יכול

  • לשכפל את הקול המקורי בלי דוגמית קול מיועדת
  • לטפל בצילום שבו הפה מוסתר או בפרופיל
  • לדבב כמה אנשים שמדברים בו זמנית

מודלים מומלצים

שאלות נפוצות

צריך לצלם מחדש את הווידאו לכל שפה?

לא: זו כל הנקודה. וידאו אחד, נוד Voice-over אחד לכל שפה, והשפתיים עוקבות אחרי כל תרגום.

הקול המקורי נשאר?

לא, רצועת השמע של התוצאה היא הקול המחובר. כדי לשמור על מוזיקה או אווירה, החזירו אותם לנוד Montage מעל הווידאו המדובב.

אפשר לדבב עם הקול שלי בשפה אחרת?

כן: שכפלו את קולכם בנוד Voice-over, כתבו את התרגום, והקול המשוכפל מקריא אותו. השפתיים עוקבות.

איזה אורך וידאו מתקבל?

משנייה אחת עד שתי דקות למעבר. מעבר לזה, חתכו את הווידאו בנוד Montage ודבבו את החלקים.

כמה עולה דיבוב וידאו?

המחיר עוקב אחרי משך הזמן שהופק, לשנייה, ומוצג על הכפתור מהרגע שהווידאו והקול מחוברים. כשל טכני מוחזר באופן אוטומטי.

הדיבוב עובד על וידאו שהופק על ידי AI?

כן, בדיוק כמו על צילום אמיתי. צילום מ-Wan, Seedance או Veo עם פנים מהחזית מדובב כמו כל וידאו אחר.

אפשר לשמור על התנועות וההבעות?

כן: רק הפה מחושב מחדש. הידיים, הגבות, תנועות הראש הן אלו של הצילום המקורי.

איזה קול לבחור לדיבוב אמין?

קול באותו רגיסטר של האדם, או השכפול שלו. הקשיבו לקול בלבד בנוד Voice-over לפני הפעלת הסנכרון.

דיבוב וידאו עם AI, שפתיים בסנכרון

שימוש ב-workflow הזה

חשבון חינמי, בלי כרטיס אשראי. ה-workflow נפתח מוכן מראש בקנבס שלכם.