指南 / 影片剪輯

修復模糊、雜訊或老舊的影片

修復功能能清理片段中的問題。它無法還原相機從未記錄的內容,而且看起來最清晰的引擎,未必是最接近真實的。

  • 閱讀時間 7 分鐘

本文由英文自動翻譯。閱讀原文

受損已修復生成式

依序列出你製作的內容。點一下即可跳到對應步驟。

修復影片會取得已在媒體庫中的片段(上傳檔案或渲染結果),以你選擇的解析度重新渲染,並清理雜訊、壓縮區塊和模糊感。這裡沒有提示詞:片段和你選擇的引擎就是全部的輸入。

為了展示每個引擎的效果,我們從 Film scene 預設集中取得那個夜間摩托車鏡頭,將其縮小至 360p 並加入大量顆粒和嚴重壓縮,然後以四種方式修復受損的副本。因為我們仍保有乾淨的原始檔案,所以能將每個結果與之比較評分。

將片段放入你的媒體庫

修復功能適用於你媒體庫中的影片。上傳片段,或使用你在 NOLGIA 上製作的片段,然後開啟 修復影片 並在 來源 下選取它,或在片段自己的頁面按 修復與放大。控制台會自動讀取片段的大小、長度和幀率。

修復影片的來源面板,已選取損壞的片段 night-courier-damaged-360p,顯示 640x360、5s 和 24 fps,下方有「選擇其他影片」按鈕,以及「選擇影片」列中的片段
來源。 (1) 來自你媒體庫的片段,顯示控制台自動讀取的大小、長度和幀率。選擇其他影片可替換它。

片段長度可為 1 到 120 秒。修復後的片段會保留來源的寬高比,因此直式片段修復後仍為直式。

360p 下濕潤高速公路上的夜間摩托車鏡頭:畫面柔和、有顆粒感且出現塊狀偽影,騎士和汽車模糊不清,尾燈光暈滲入路面
我們的損壞副本。 Film 場景範例縮減至 360p,並加入顆粒感和重度壓縮。這是下方每個引擎接收到的片段。

指出問題所在

主控台依其解決的問題對引擎進行分組,每張卡片都附有一行說明。請從問題出發,而非從引擎開始:

問題所在主控台中的分組從標示為以下的卡片開始
解析度低、模糊或過小提升解析度與細節一般實拍影片。請從這裡開始
顆粒感或感測器雜訊降噪嚴重雜訊或顆粒感,或降噪加上細節
區塊化、拖影或過度壓縮壓縮損壞最粗糙的來源,或中度壓縮
臉部是最模糊的部分臉部臉部,來自粗糙來源
來自錄影帶或廣播的梳齒狀線條交錯式影片廣播、VHS、DVD 和 SD,或攝影機錄影帶
快速移動造成的模糊非提升解析度的修復快速移動造成的模糊
乾淨但不夠銳利生成式修復快速處理
還原影片控制台顯示的群組與說明。
「還原影片」中「提升解析度與細節」下的「引擎」面板,有兩個編號標記:SeedVR2 Restore(柔和、有雜訊或小型影片)和 Proteus(一般真人實拍。請從這裡開始),旁邊還有 Gaia、Gaia Cg、Proteus Natural 和 Rhea,各自顯示其最高解析度和速率
依解決的問題分組的引擎。 (1) SeedVR2 Restore,「柔和、有雜訊或小型影片」。(2)「一般真人實拍。請從這裡開始」。每張卡片說明其用途、可提升到的程度以及速率。

SeedVR2 Restore 位於「提升解析度與細節」中的「柔和、有雜訊或小型影片」。它是唯一具有 細節強度 滑桿的引擎:數值越高,恢復的紋理越多,但生成的內容也越多,因此當影片必須保持忠實時,請將其設為低。

選擇你要交付的解析度

選擇從 720p 到 2160p 的等級,或在提供該選項的引擎上選擇 4320p (8K)。等級名稱代表解析度類別,影片在該類別內保持其自身的形狀。

輸出解析度等級 720p、1080p、1440p 和 2160p,每個等級都顯示影片的價格,已選擇 1080p,且「細節強度」滑桿設為低,並註明數值越高可恢復更多紋理但會生成更多內容
尺寸與細節。 (1) 解析度層級,以及你的片段對應的價格。(2) 細節強度,在 SeedVR2 Restore 中:若片段需保持原貌,請維持低設定。

開始前,控制台會顯示根據你的片段長度與所選層級,本次執行可能的最高費用。你將被收取計量費用與該公開費率中較低者。

提示:部分引擎在所有尺寸下費用相同. 降噪、動態去模糊或 HDR 處理不會放大任何內容,因此 720p 與 4K 的價格相同。控制台會在這些引擎上標註說明。請選擇你希望輸出的尺寸。

將結果與原始來源比較

這裡是來自損壞副本與 SeedVR2 Restore 1080p 的相同畫面,以全尺寸裁切。拖曳線條以進行比較。

損壞副本的全尺寸裁切:騎士、白色轎車與卡車在夜間濕滑路面上,因顆粒與壓縮區塊而模糊SeedVR2 Restore 1080p 處理後的相同裁切:顆粒與區塊消失,騎士的夾克與安全帽、尾燈與護欄邊緣清晰乾淨損壞 360pSeedVR2 Restore
第 31 格(共 121 格),從 1080p 輸出以原始尺寸裁切。 雜訊與壓縮區塊已消失;汽車、機車與護欄的邊緣再次變得清晰。
SeedVR2 修復結果(1080p):夜間機車鏡頭乾淨清晰,尾燈銳利,濕潤路面反射明顯
SeedVR2 Restore。 四種結果中最接近原片,邊緣也最乾淨。
由標示為 General live action 的引擎產生的結果:乾淨平滑,騎士影像較柔和
"General live action. Start here"。雜訊與區塊消失,呈現平滑且略帶柔和的質感。
由標示為 Severe noise or grain 的引擎產生的結果:非常乾淨,但最細微的細節已被抹平
"Severe noise or grain"。畫面最乾淨,但也最柔和。
由標示為 The fast pass 的引擎產生的結果:四者中看起來最銳利,汽車與機車上呈現清晰的新細節
"The fast pass",生成式。 看起來最銳利,因為它繪製了新的細節。

我們測量的項目

我們將每個結果與乾淨的原片逐格比對評分,使用兩種標準指標來衡量兩張圖片的接近程度。在這兩種指標上,數值越高代表越接近。

片段SSIMPSNR
僅放大的損壞副本0.94434.4 dB
SeedVR2 Restore0.96336.6 dB
一般實拍影片。請從這裡開始0.96035.5 dB
嚴重雜訊或顆粒0.95735.0 dB
快速通道,生成式0.95033.6 dB
一段 5 秒的片段,1080p 解析度共 121 幀,每個引擎各執行一次。
  • 每個引擎都移除了顆粒和壓縮區塊,且每個結果在 SSIM 上都比受損副本更接近原始檔案。
  • 看起來最銳利的結果反而最偏離真實。生成式通道在兩項指標上的分數都是四者中最低,且在 PSNR 上甚至低於受損副本:它添加的清晰細節是憑空生成的,並非還原而來。請看下方裁圖中白色轎車的後部。
  • 沒有任何引擎還原了雨絲。原始檔案中有細密的雨絲橫跨畫面。受損副本失去了這些細節,而沒有任何引擎將它們畫回來。
生成式結果的全尺寸裁圖:清晰,轎車和自行車上有銳利的新邊緣受損前乾淨原始檔案的相同裁圖:畫面中有細密的雨絲和較柔和的自然細節生成式通道乾淨原始檔案
再次查看第 31 幀。左側的生成式通道看起來很清晰。右側的乾淨原始檔案顯示了實際存在的內容。

注意:修復可能會重繪臉部. 新增細節的引擎,尤其是生成式引擎,以及高「細節強度」設定下的 SeedVR2,可能會改變微小特徵,包括臉部。在使用結果前,請將人物和任何文字與原始素材進行比對。

何時該使用其他工具

  • 鏡頭本身有誤,而非品質問題:使用 Miroge 更改物件或地點,或重新製作。
  • 顏色褪色:在還原後,於 Studio 中使用 Color grade footage 預設集進行調色。
  • 片段太短:在媒體庫中開啟片段,並使用延長片段功能將其延伸至最後一幀之後。

費用說明

還原引擎的計費方式為每 5 秒原始素材,依解析度等級定價,且高於 30 fps 的幀率會按比例增加費用。開始前,控制台會顯示該片段執行的最高費用,你將被收取計量費用與該上限金額中較低者。若還原失敗,將退還點數。

常見問題

它能修復 VHS 或攝影機磁帶嗎?
有專為此設計的引擎,位於「交錯掃描素材」群組中:一個適用於廣播、VHS、DVD 和 SD,另一個適用於攝影機磁帶。本指南是在損壞的數位片段上測試,而非實際磁帶。
我可以指定要修復什麼嗎?
不行。Restore 不接受提示詞。你選擇的引擎和解析度層級就是全部的輸入。
人物看起來會一樣嗎?
我們尚未進行測量。增加細節的引擎可能會改變微小特徵,包括臉部,因此請將結果與原始來源進行比對。
我需要哪個方案?
Restore 引擎適用於 Starter 及以上方案。

從你的媒體庫清理一段影片

開啟 Restore Video

影片剪輯

影片生成錯誤:修正它或重新製作

大多數錯誤的影片不需要重新渲染。只需替換不對的那個元素、移動場景、清理畫面或延長影片,只有當鏡頭本身錯誤時才重新製作。

· 閱讀時間 6 分鐘

影片剪輯

保留主體,改變周圍的世界

保留片段中的腿部、手部或產品,並重繪周圍的環境。在 6 次測試中有 6 次都有效的提示詞順序,以及它失效的情況。

· 閱讀時間 9 分鐘