NVIDIA宣布大幅擴充面向廣播、體育與串流製作的軟體集合「NVIDIA AI for Media」。這次更新配合9月11日至14日於荷蘭阿姆斯特丹舉行的廣播設備展IBC 2026發表,內容涵蓋以生成式AI進行的補幀、判斷影片是否由AI生成,以及嘴型同步的多語言配音。整套方案的共通點在於,不必改造現有的播送設備,只要疊加需要的功能即可。

不換攝影機,也能讓體育慢動作更流暢

最受矚目的是 Video Frame Generation(VFG)。它運用生成式AI在原始影像的影格之間產生新的影格,將影格率提升為2倍或4倍,並藉由維持時間軸上的連貫性,避免高速移動的被攝體出現畫面破綻。

Ross Video 已將這項技術整合進自家的重播產品 Rio Replay,用於製作體育轉播的慢動作畫面。目前支援6倍慢動作,8倍的擴充也正在進行中。換句話說,即使不導入超高速攝影機逐格拍攝,也能取得流暢的重播畫面,這有機會改變器材投資的先後順序。

提升畫質本身的功能也一併到位。Video Super Resolution(VSR)在抑制雜訊與壓縮瑕疵的同時提高解析度,這次新增10位元影像支援,並提供讓開發者在速度優先與畫質優先之間選擇的串流模式。TrueHDR 則能即時將標準動態範圍影像轉換為HDR,最高可達約2,000尼特。VSR、VFG 與 TrueHDR 可以串接在同一條影像處理流程中,因此把既有片庫重新加工用於串流發布也在設想範圍內。

AI生成影片的辨識準確率達到99.3%

新聞機構最關心的,應該是 Synthetic Video Detector(SVD)。這是一項以數值回傳素材為實拍或AI生成之機率的NIM微服務,今年首次在SIGGRAPH上公開。經過後續改良,文字生成影片的辨識準確率達到99.3%,影像生成影片為97.7%,據說在後者這種較困難的情境中提升幅度最大。

新聞製作系統廠商 Dalet 已將SVD納入雲端驗證流程,讓編輯團隊能在自家介面上確認分數與中繼資料。TwelveLabs 則把影像智慧平台上的首款應用 Compliance by TwelveLabs 轉為正式提供,並加入SVD的逐格真實性判定,用於比對各地區的審查標準。在170多個國家支撐超過3萬5,000套發布系統的 Wowza,也計畫透過自家的 Video Intelligence Framework 發布SVD,可選擇地端、邊緣、雲端乃至完全隔離網路等多種部署形態。

一路訊號做出10種語言,傳送的影像量降到八分之一

多語言相關的更新同樣貼近實務。LipSync 是依照翻譯後的音軌重塑嘴型動作的微服務,這次改善了臉部被部分遮蔽時的處理,也更能保留牙齒、嘴唇與臉部的質感。用於判斷誰正在說話的 Active Speaker Detection 不再需要事先進行語者分離,新增語音活動偵測,並支援透過gRPC介面部署。

率先運用這套組合的是 Vizrt 旗下的 NDI。該公司展示了在現有播送流程中完成即時翻譯、嘴型同步配音以及各地區語感調整的架構。根據其內部驗證,在處理10種語言的工作流程中,與依語言分別製作獨立訊號的傳統做法相比,需要傳送的影像量只有八分之一。如果「每多一種語言就要多一條線路與設備」這個前提被打破,對地方電視台與中小型發布業者而言,影響會相當可觀。

順著這個方向,NVIDIA把涵蓋字幕、翻譯音訊、配音、影像同步與在地化圖卡的 Content Localization 參考架構帶進開發者工具包 Holoscan for Media,由 AI-Media、CAMB.AI、Chyron、Panjaya 等業者分別負責其中的環節。Holoscan for Media 本身也發表了與 Media Exchange Layer(MXL)的整合,後者是讓軟體化的媒體功能之間交換影像、音訊與資料的開放層。

自行培養體育專用模型的操作手冊

另一根支柱是 NVIDIA Sports Intelligence Playbooks。這是一套操作手冊,指導聯盟與媒體業者運用自有的比賽影像與標註資料,針對各項運動微調NVIDIA的開源模型,內容貫穿資料整備、訓練、推論、評估與部署。

初期驗證的數字相當好懂。以未用於訓練的影像進行測試時,選擇題的正確率從約53%提升到94%,開放式問答的評估則從約5.7%提升到66%。這正好回應了「通用模型會誤讀運動特有的規則與戰術」這個常見課題。Machina Sports 已把這套手冊接進自家的體育資料與代理人基礎架構,讓轉播權持有方能在自己手上運行專屬的分析。

總結

這次的擴充與其說是搶眼的新產品,不如說是把能塞進電視台既有設備縫隙中的零件做了一次集中更新。生成影格帶來的6倍慢動作、達到99.3%的AI影像辨識,以及10種語言下影像量只剩八分之一的發布方式,成果都能用數字說明。製作現場的AI已經走出實驗階段,直接進入線路費用與人力配置這類成本核算的討論,這樣理解應該最為貼切。