6 באוקטובר 2026
אינטרפולציית פריימים בעזרת AI: מה היא מצליחה לעשות, איפה היא נשברת, ובאיזה כלי להשתמש
אינטרפולציה יוצרת את הפריימים החסרים בין שני פריימים של סרטון, כדי לעבור מ-24 ל-30 או ל-60 fps. הבדיקות שלנו על ריקוד מהיר ועל חיתוך בין שני צילומים, Topaz מול RIFE, הפגמים שחשוב להכיר והכלים, מהחינמיים ועד המקצועיים.
Frank Houbreמייסד Imaginode
מה עושה מודל אינטרפולציה
מודל אינטרפולציה מקבל שני פריימים עוקבים, מעריך כיצד כל אזור בתמונה זז מהאחד לשני, ומצייר פריים אחד או יותר שביניהם; הוא לא מכיר את הסצנה ולא יודע מה קרה בפועל בין שתי הרגעים.
בין שני פריימים של סרטון ב-24 פריימים לשנייה עובר עשרים וארבעית השנייה. אינטרפולציה פירושה לנחש איך נראתה הסצנה באמצע הקטע הזה, או בשליש, או בשני השלישים, לפי קצב הפריימים הרצוי. לשם כך המודל מחשב זרימה אופטית (optical flow): לכל אזור קטן בפריים הראשון, הכיוון והמרחק שבהם הוא זז בפריים השני.
מכך הוא בונה פריים שבו כל אזור עבר חלק מהדרך, ואז ממלא את החורים: כשזרוע עוברת לפני קיר, חלק מהקיר נחשף, ויש לצייר אותו. כאן נבדלים המודלים זה מזה. אלגוריתמים ישנים, כמו הפילטר minterpolate של ffmpeg, עובדים על בלוקים מרובעים ומשאירים קצוות קרועים. רשתות עצביות שאומנו למשימה הזו, RIFE, FILM, אלה של Topaz, מתייחסות לתמונה כולה ומשחזרות טוב יותר את האזורים שנחשפים.
מה שהמודל לא מסוגל לעשות הוא לנחש אירוע שלא מופיע באף אחת משתי התמונות. מצמוץ מהיר מדי, ניצוץ, כדור שמקפץ בין שני פריימים: הוא רואה רק לפני ואחרי, ומותח קו ישר בין השניים. לשימוש היומיומי, כשהופכים צילום מ-24 ל-30 או ל-60 פריימים לשנייה, זה לא משפיע. השיטה המלאה להמרה מופיעה בהמרת סרטון מ-24 fps ל-30 fps.
המבחן הקשה: ריקוד מהיר
בריקוד שנוצר ב-24 פריימים לשנייה, עם זרועות מהירות וטשטוש תנועה, Topaz ו-RIFE הפיקו פריימי ביניים נקיים: בלי איבר כפול, בלי יד מעוותת, הטשטוש של המקור מסתיר את השאר.
חיכינו שהידיים יתקלקלו. לקחנו סרטון ריקוד מקטלוג ההדגמות שלנו, 720 × 1280, 5 שניות, 24 פריימים לשנייה, והעברנו אותו בשני מנועים ב-6 באוקטובר 2026: Topaz, זה שמאחורי node ה'שיפור', לכיוון 30 ו-60 פריימים לשנייה, ו-RIFE, המודל החינמי הנפוץ ביותר, שמכפיל את קצב הפריימים ל-48. לאחר מכן מצאנו, בחישוב, את שני הפריימים העוקבים שבהם התמונה משתנה הכי הרבה, ובדקנו מה כל מנוע הציב ביניהם.
התוצאה טובה מהצפוי. בקרופ שלהלן, היד זזה מהמותן קדימה; הפריים של RIFE ושל Topaz מציבים אותה באמצע הדרך, עם טשטוש עקבי, בלי אצבע שישית ובלי זרוע רוח רפאים. חלק מהסיבה נעוץ במקור: מודל וידאו מייצר טשטוש תנועה על תנועות מהירות, כמו מצלמה אמיתית, והטשטוש הזה מסתיר שגיאות אינטרפולציה.
הבדל אחד נראה במקום אחר: RIFE, ב-fal, מחזיר סרטון בלי קול, בעוד ש-Topaz משכפל את פס השמע של המקור. בצילום שקט, אין בכך חשיבות; בפרסומת עם מוזיקה, יש להחזיר את הקול בעריכה. Topaz גם הפיק בדיוק את קצב הפריימים המבוקש, בעוד ש-RIFE יודע רק להכפיל: 24 הופך ל-48, 72 או 96, לעולם לא ל-25 או 30.
המקום שבו זה באמת נשבר: החיתוך בין שני צילומים
בחיתוך חד, האינטרפולציה בונה פריים שלא קיים: Topaz מיזג את שני הצילומים בדיסולב, RIFE בלי זיהוי מעברי סצנה הפיק מוזאיקת פיקסלים, ורק RIFE עם זיהוי מעברי סצנה השאיר את החיתוך שלם.
המקרה הקלאסי הוא העריכה. חיברנו שני צילומים בחיתוך חד, שתי שניות של מעוף מעל כפר ואז שתי שניות של בקבוק בושם, והעברנו את הקובץ באותם מנועים. בין הפריים האחרון של הכפר לפריים הראשון של הבקבוק, מודל אינטרפולציה מחפש תנועה שלא קיימת, ובכל זאת צריך להפיק פריים.
Topaz הפיק פריים שבו הבקבוק נראה שקוף מעל הכפר, כמו דיסולב של פריים אחד, שישית השנייה. RIFE, בלי אפשרות מיוחדת, הפיק פריים גרוע הרבה יותר: הבקבוק חתוך לריבועים צפים על רקע של פיקסלים. עם הפעלת זיהוי שינויי סצנה, RIFE הכיר בחיתוך והשאיר אותו חד, בלי פריים מומצא.
בצפייה רגילה, פריים רוח רפאים של שישית השנייה עובר לרוב בלי שמישים לב. בעריכה קצבית, עם חיתוך כל שתי שניות, הוא יוצר תחושת 'לכלוך' שקשה להצביע עליה, ובולט מאוד כשבוחנים פריים אחר פריים. הכלל פשוט: יש לעשות אינטרפולציה לכל צילום בנפרד, לפני העריכה, לעולם לא לסרטון הסופי.
פגמים נוספים שחשוב להכיר
מעבר לחיתוכים, האינטרפולציה מתבלבלת מאובייקטים שחולפים זה על זה, דוגמאות חזרתיות, טקסט נגלל, תנועה מהירה יותר מרוחב האובייקט עצמו בין פריים לפריים, ואלמנטים שמופיעים בבת אחת.
אובייקטים שחולפים זה על זה, שני אנשים שעוברים זה את זה, יד שעוברת לפני פנים: המודל צריך להחליט איזה אזור משתייך לאיזה אובייקט, והגבול בין השניים יכול להתעוות. דוגמאות חזרתיות, רשת, פסים, גדר בתנועה, מטעות אותו בהתאמה: מוט אחד מתבלבל עם השכן שלו, והדוגמה נראית כאילו נגלשת בכיוון הלא נכון.
טקסט נגלל וממשקים הם מלכודת נוספת: האותיות מתעוותות קלות בפריימים המומצאים, וזה בולט כבר בקריאה. תנועה מהירה מאוד, אובייקט שזז יותר מרוחבו שלו מפריים לפריים, אין לה התאמה אמינה: המודל עשוי לשכפל את האובייקט או למזג אותו בדיסולב. ולבסוף, כל מה שמופיע בבת אחת בין פריימים, ברק, פלאש, ניצוץ, נמרח לדיסולב במקום להופיע חד.
בסרטוני AI, חלק גדול מהמקרים האלה נדיר: המודלים מייצרים מעט טקסט נגלל קריא, והתנועה שלהם בדרך כלל חלקה. פאנים, רחפנים, פנים, מוצרים שמסתובבים, דמויות שהולכות, כל אלה עוברים מצוין. אלה גם הצילומים שבהם קצב פריימים נמוך מורגש הכי הרבה.
הכלים, מהחינמיים ועד המקצועיים
הכלים מתחלקים לשלוש משפחות: תוכנות מותקנות (Topaz Video, DaVinci Resolve, Premiere Pro, Flowframes), שירותים מקוונים (Topaz for Web, CapCut, TensorPix, HitPaw) ו-API-ים (Runway, fal); המחירים שנבדקו ב-6 באוקטובר 2026 נעים מאפס עד 299 דולר בשנה.
Topaz Video, בעבר Video AI, היא הסטנדרט בתשלום. הוא מציע חמישה מודלי אינטרפולציה: Apollo לתנועה לא לינארית ולמקורות מעט מטושטשים, Apollo Fast, Chronos להמרת קצב פריימים ולסלואו מושן, Chronos Fast לתנועות גדולות, ו-Aion לדיוק גבוה. הוא עולה 299 דולר בשנה או 59 בחודש, 699 בשנה לשימוש מסחרי מעל מיליון דולר הכנסות. הגרסה המקוונת שלו, Topaz for Web, מיועדת ל-30, 60, 90 או 120 פריימים לשנייה בעד 19 דולר בחודש במבצע. Adobe חתמה ביוני 2026 על הסכם לרכישת Topaz Labs.
בצד החינמי, Flowframes הוא מנשק Windows ל-RIFE, DAIN ו-FLAVR, בקוד פתוח, שגרסאותיו העדכניות ביותר יוצאות ראשית לתומכים ב-Patreon. RIFE ו-FILM, האחרון בפרסום Google, הם מודלי מחקר שהוצגו ב-2022 וניתנים לשימוש משורת הפקודה, ו-ffmpeg מציעה את הפילטר minterpolate, בלי רשת עצבית. DaVinci Resolve מבצעת אינטרפולציית זרימה אופטית בגרסה החינמית שלה; מצב Speed Warp שמור לגרסת Studio, במחיר 295 דולר. Premiere Pro, ב-22.99 דולר לחודש, מציעה Optical Flow באינטרפולציה הזמנית. ו-SVP, ב-24.99 דולר לכל החיים, מבצעת אינטרפולציה בזמן אמת בעת הנגינה, בלי קובץ לייצא.
ברשת, CapCut מציעה זרימה אופטית ב-30, 50 או 60 פריימים לשנייה; משתמשים דיווחו שהסלואו מושן החלק שלה עבר לתוכנית Pro. TensorPix מצהירה על עד 120 פריימים לשנייה, עם ניסיון חינמי של שלוש דקות ב-720p, ו-HitPaw על המרה ל-60 או 120, ממחיר התחלתי של 24.99 דולר בחודש. למפתחים, ה-API של Runway ממיר ל-24, 25, 30, 48, 50, 60 או 120 פריימים לשנייה, ולווריאציות שלהם 23.98, 29.97 ו-59.94, בעד 0.005 דולר לשנייה. ב-Imaginode, node ה'שיפור' פועל על בסיס Topaz: 6 קרדיטים לחמש שניות ב-720p עד 30 פריימים לשנייה, עם שמירת הקול.
החלקת התנועה בטלוויזיות
החלקת התנועה בטלוויזיות היא אינטרפולציה בזמן אמת לסרטים ב-24 פריימים לשנייה; היא נותנת לסרטים מראה של וידאו, עד כדי כך שטום קרוז הקליט בדצמבר 2018 הודעה המבקשת לכבות אותה, ושמצב Filmmaker כבה אותה כעת כברירת מחדל.
רוב הטלוויזיות החדישות מבצעות אינטרפולציה כברירת מחדל לכל מה שהן מציגות, כדי למלא את הפאנל שלהן ב-60 או 120 הרץ. בספורט, זה שיפור. בסרט, זהו מה שמכונה 'אפקט אופרת הסבון': התנועה הופכת חלקה כל כך שהסצנה נראית כמו מצולמת בווידאו, כמו אופרת סבון טלוויזיונית, ומאבדת את הרטט הקל של 24 הפריימים שמזוהה עם קולנוע. ב-4 בדצמבר 2018 פרסמו טום קרוז וכריסטופר מקווארי סרטון קצר שמסביר שההגדרה הזו הופכת את רוב הסרטים למראה של וידאו במהירות גבוהה, וכיצד לכבות אותה.
ה-UHD Alliance הגיבה עם מצב Filmmaker, שהוכרז באוגוסט 2019 והושק בתערוכת CES בינואר 2020, שמכבה את החלקת התנועה, הפחתת הרעש והחידוד, ומכבד את קצב הפריימים המקורי. בצד השיווק, Netflix מחייבת קבצים שנמסרים בקצב הפריימים המקורי, זה של הצילום והעריכה, ומזהירה שהמרות קצב פריימים לא תקינות, שמשאירות ארטיפקטים, נדחות.
לקריאייטור, הלקח כפול. אין לבצע אינטרפולציה מתוך רפלקס לצילום בדיוני שצריך לשמר את המרקם הקולנועי שלו, ויש לבחור את קצב הפריימים לפי המקום שבו הסרטון יוצג. הבחירה בין 24, 25, 30 ו-60 פריימים לשנייה, פלטפורמה אחר פלטפורמה, מפורטת ב24, 25, 30 או 60 fps: איזה קצב פריימים לבחור.
הסיכום
אינטרפולציה בעזרת AI אמינה על תנועה רציפה, פאנים, רחפנים, דמויות, גם מהירות כשהמקור כולל טשטוש תנועה; היא נכשלת בחיתוכים, בטקסט, בדוגמאות חזרתיות ובאירועים מיידיים.
יש לבצע אינטרפולציה לכל צילום לפני העריכה, לעולם לא לסרטון שכבר נחתך. אם יש בידיכם רק הקובץ הסופי, השתמשו בכלי שמזהה מעברי סצנה, ובדקו כל חיתוך פריים אחר פריים.
לקצב פריימים מדויק, 25, 30, 50 או 60, צריך מנוע שמכוון לקצב מטרה, כמו Topaz; RIFE יודע רק להכפיל בשניים, שלושה או ארבעה. לצילום עם קול, בחרו מנוע שמשכפל אותו, או תתכננו להחזיר אותו בעריכה.
ב-Imaginode, node ה'שיפור' משנה את קצב הפריימים בעזרת Topaz ב-×1, עם שמירת הקול, בעד 6 קרדיטים לחמש שניות ב-720p עד 30 פריימים לשנייה. זרימת העבודה המוכנה לשימוש היא תבנית 'שינוי קצב הפריימים של סרטון'.