2026年10月6日
AI 補幀技術：它的強項、它的破綻、該用哪個工具
補幀技術會自行生成影片中兩張畫面之間缺少的畫面,將 24 fps 轉換為 30 或 60 fps。我們針對一段快速舞蹈與兩個鏡頭之間的剪接點進行測試,比較 Topaz 與 RIFE 的表現,整理出應該留意的缺陷,以及從免費到專業的各種工具。
Frank HoubreImaginode 創辦人
補幀模型究竟在做什麼
補幀模型接收兩張連續的畫面,估算每個區域從一張到另一張的位移,再畫出一張或多張中間畫面;它既不了解場景,也不知道兩個時刻之間實際發生了什麼。
在一部 24 幀每秒的影片中,兩張畫面之間相隔二十四分之一秒。補幀的做法,是依照目標幀率猜測這段時間中間、三分之一處或三分之二處的場景樣貌。為此,模型會計算光流:針對第一張畫面中的每個小區域,估算它在第二張畫面中位移的方向與距離。
據此模型推算出一張畫面,其中每個區域都走了一部分的路,再補上因此產生的空白:當一支手臂經過牆面前方時,一部分牆面會露出來,必須加以描繪。這正是各模型差異所在。較舊的演算法,例如 ffmpeg 的 minterpolate 濾鏡,以方形區塊運作,會留下破碎的邊緣。專門訓練來完成此任務的神經網路,RIFE、FILM,以及 Topaz 自家的模型,則是對整張畫面進行推理,能更好地重建露出的區域。
模型做不到的,是猜測兩張畫面都沒有出現的事件。一次太快的眨眼、一道火花、一顆在兩張畫面之間彈跳的球:它只看得到前後兩個時刻,並在兩者之間畫出一條直線。對日常用途來說,把鏡頭從 24 轉換到 30 或 60 幀每秒並不會造成影響。完整的轉換方法請參見將 24 fps 影片轉換為 30 fps。
困難的考驗:一段快速舞蹈
在一段以 24 幀每秒生成的舞蹈畫面中,手臂快速擺動且帶有動態模糊,Topaz 與 RIFE 都生成了乾淨的中間畫面:沒有肢體重影,沒有變形的手,來源畫面的模糊效果掩蓋了其他瑕疵。
我們原本以為手部會出現破綻。我們取用示範素材庫中的一段舞蹈影片,解析度 720 × 1280,長 5 秒,幀率 24 幀每秒,於 2026 年 10 月 6 日分別以兩套引擎處理:一是 Topaz,也就是「增強」節點背後所使用的技術,轉換為 30 與 60 幀每秒;二是 RIFE,目前最普及的開放模型,將幀率倍增至 48。接著我們以運算方式找出畫面變化最大的兩張連續畫面,並觀察各引擎在其中插入了什麼。
結果比預期要好。在下方的裁切畫面中,手從腰部往前擺動;RIFE 與 Topaz 生成的畫面都將手放在中間位置,模糊效果一致,沒有出現第六根手指,也沒有幽靈手臂。部分原因在於來源畫面本身:影片模型在快速動作上會產生動態模糊,就像真實攝影機一樣,這種模糊讓補幀的誤差變得不易察覺。
另一個差異出現在其他地方:fal 上的 RIFE 輸出的影片沒有聲音,而 Topaz 則會複製來源的音軌。對於無聲鏡頭來說無關緊要,但對於配有音樂的廣告而言,就得在剪輯時把聲音補回去。此外,Topaz 能精確產出所要求的幀率,而 RIFE 只能以倍數方式運作:24 只能變成 48、72 或 96,絕不會變成 25 或 30。
真正破綻之處:兩個鏡頭之間的剪接點
在硬剪接點上,補幀技術會生成一張根本不存在的畫面:Topaz 以疊化方式將兩個鏡頭重疊,沒有啟用場景偵測的 RIFE 則產生一堆像素馬賽克,只有啟用場景偵測的 RIFE 完整保留了剪接點。
最典型的案例就是剪輯。我們以硬剪接方式接合了兩個鏡頭,前兩秒是空拍村莊的鏡頭,後兩秒是香水瓶的鏡頭,並將這個檔案送入相同的引擎處理。在村莊最後一張畫面與香水瓶第一張畫面之間,補幀模型要尋找一個根本不存在的動作,卻仍必須產出一張畫面。
Topaz 生成的畫面中,香水瓶以半透明方式疊在村莊畫面上,就像是一張畫面長度的疊化效果,也就是六十分之一秒。沒有開啟任何特殊選項的 RIFE,生成的畫面則糟糕得多:香水瓶被切成一塊塊方形,漂浮在一片像素背景上。啟用場景變化偵測功能後,RIFE 能辨識出剪接點,並完整保留,沒有生成任何捏造的畫面。
在正常播放速度下,一張六十分之一秒的幽靈畫面通常不會被察覺。但在節奏緊湊的剪輯中,每兩秒就有一個剪接點,這種瑕疵會營造出一種難以具體指出的「不乾淨」感,而逐格檢視時則一眼就能看出。規則很簡單:應在剪輯之前分別對每個鏡頭進行補幀,絕不要對已完成剪輯的最終影片進行補幀。
其他應該留意的缺陷
除了剪接點之外,補幀技術在互相交錯的物體、重複的圖案、滾動的文字、每張畫面移動幅度超過物體自身寬度的動作,以及瞬間出現的元素上,也容易出錯。
互相交錯的物體,例如兩個人相互經過,或一隻手經過臉前方:模型必須判斷哪個區域屬於哪個物體,而兩者之間的邊界可能會出現波動。重複的圖案,例如格子、條紋,或移動中的柵欄,會讓模型在對應上產生混淆:某一條柵欄會被誤認為鄰近的那一條,導致整個圖案看起來朝反方向滑動。
滾動的文字與介面是另一個陷阱:生成的畫面中字母會略微變形,只要用心閱讀就會發現。非常快速的動作,例如物體在前後兩張畫面之間移動的距離超過自身寬度,就沒有可靠的對應關係:模型可能會讓物體出現重影,或以淡入方式呈現。最後,任何在兩張畫面之間突然出現的東西,例如閃電、閃光、火花,都會被模型以疊化方式模糊呈現,而不是呈現為清晰的瞬間。
在 AI 生成的影片中,上述大多數情況其實相當少見:模型生成的滾動文字很少清晰可讀,而且動作通常都相當流暢。搖鏡、空拍、人臉、旋轉中的商品、行走中的人物,這些動作都能順利補幀。同時,這些也是幀率過低時最容易被察覺的鏡頭類型。
工具選擇:從免費到專業
工具大致可分為三類:安裝型軟體(Topaz Video、DaVinci Resolve、Premiere Pro、Flowframes)、線上服務(Topaz for Web、CapCut、TensorPix、HitPaw)以及 API(Runway、fal);於 2026 年 10 月 6 日查得的價格範圍從免費到每年 299 美元不等。
Topaz Video,前身為 Video AI,是付費方案中的標竿。它提供五種補幀模型:Apollo 適用於非線性動作與稍微模糊的來源畫面,Apollo Fast,Chronos 適用於幀率轉換與慢動作,Chronos Fast 適用於大幅度動作,以及 Aion 適用於高精度需求。費用為每年 299 美元或每月 59 美元,若營收超過一百萬美元則商業用途費用為每年 699 美元。其網頁版 Topaz for Web 目標幀率為 30、60、90 或 120 幀每秒,優惠價為每月 19 美元。Adobe 於 2026 年 6 月簽署了收購 Topaz Labs 的協議。
免費方面,Flowframes 是一款 Windows 介面軟體,整合了 RIFE、DAIN 與 FLAVR,採用開源授權,其最新版本通常會先發布給 Patreon 上的贊助者。RIFE 與 FILM,後者由 Google 發布,都是在 2022 年發表的研究模型,可透過命令列使用;ffmpeg 則提供 minterpolate 濾鏡,不使用神經網路。DaVinci Resolve 的免費版本提供光流補幀功能;Speed Warp 模式則僅限於 Studio 版本使用,售價 295 美元。Premiere Pro,每月 22.99 美元,在時間插補功能中提供 Optical Flow。而 SVP,一次性付費 24.99 美元終身使用,可在播放過程中即時補幀,無需匯出檔案。
線上服務方面,CapCut 提供 30、50 或 60 幀每秒的光流補幀;有使用者反映其流暢慢動作功能已被移至 Pro 方案。TensorPix 宣稱最高可達 120 幀每秒,並提供三分鐘的 720p 免費試用,HitPaw 則提供轉換為 60 或 120 幀每秒的功能,價格從每月 24.99 美元起。對開發者而言,Runway 的 API 可轉換為 24、25、30、48、50、60 或 120 幀每秒,以及對應的 23.98、29.97 與 59.94 變體,費用為每秒 0.005 美元。在 Imaginode 中,「增強」節點使用的是 Topaz:720p 每五秒 6 點數,可轉換至最高 30 幀每秒,並保留原始聲音。
電視的動態補償技術
電視的動態補償功能,是對 24 幀每秒影片進行的即時補幀處理;它讓電影呈現出影片般的質感,甚至讓 Tom Cruise 在 2018 年 12 月錄製了一段訊息,呼籲觀眾將其關閉,如今 Filmmaker 模式則會預設將其關閉。
大多數新款電視預設會對顯示的所有內容進行補幀,以填滿其 60 或 120 赫茲的面板更新率。在體育賽事上,這是一項進步。但在電影上,這就是所謂的「肥皂劇效果」:動作變得如此流暢,使整個場景看起來像是以錄影方式拍攝,就像電視連續劇一樣,失去了 24 幀畫面特有的、代表電影質感的輕微跳動感。2018 年 12 月 4 日,Tom Cruise 與 Christopher McQuarrie 發布了一段短片,說明這項設定會讓大多數電影看起來像是高速錄影,並示範如何將其關閉。
UHD Alliance 則以 Filmmaker 模式作為回應,該模式於 2019 年 8 月公布,並於 2020 年 1 月的 CES 展上正式推出,可關閉動態補償、降噪與銳化功能,並維持原始幀率。在發行方面,Netflix 要求交付的檔案必須採用拍攝與剪輯時的原始幀率,並警告處理不當、留有瑕疵的幀率轉換檔案將會被拒收。
對創作者而言,這帶來雙重啟示。不要對需要保留電影質感的劇情鏡頭隨意進行補幀,並依照影片將在何處被觀看來選擇適當的幀率。關於 24、25、30 與 60 幀每秒各平台的選擇方式,詳情請見24、25、30 或 60 fps:該選擇哪種幀率。
總結
AI 補幀技術在連續動作上相當可靠,包括搖鏡、空拍、人物動作,即使速度較快,只要來源畫面帶有動態模糊也能處理得當;但在剪接點、文字、重複圖案與瞬間發生的事件上,則容易出錯。
請在剪輯之前分別對每個鏡頭進行補幀,絕不要對已經剪輯完成的影片進行處理。若您手上只有最終成品檔案,請使用具備場景偵測功能的工具,並逐格檢查每個剪接點。
若需要精確的幀率,例如 25、30、50 或 60,就需要像 Topaz 這類能針對特定目標幀率運作的引擎;RIFE 只能以 2 倍、3 倍或 4 倍的方式進行倍增。若鏡頭中帶有聲音,請選擇會保留聲音的引擎,或事先規劃好如何把聲音補回去。
在 Imaginode 中,「增強」節點可使用 Topaz 以 ×1 倍率變更幀率,並保留聲音,費用為 720p 每五秒 6 點數,可轉換至最高 30 幀每秒。現成可用的工作流程請見「變更影片幀率」範本。