歸剛誒AI

歸剛欸,AI 又進步了——每天幫你盯 AI 圈的台灣人日報

← 回首頁 · 回第 34 期(2026-07-13)
研究・2026-07-13

SAM-MT:即時互動的多目標影片切割

Hugging Face 論文區推上來一篇 SAM-MT,題目是影片物件切割(VOS)裡一個很實用的方向:即時、可互動的多目標追蹤。影片切割要做的,是把使用者指定的目標從畫面裡框出來、逐幀持續追著它;近年的方法在單一目標上已經做得很漂亮,但同時盯好幾個目標、還要能即時互動,仍然是難題。

SAM-MT 的切入點就在這裡——讓使用者一次指定多個目標,系統即時把它們各自分割並在整段影片裡持續追蹤,過程中還能互動修正。這比起一次只追一個、或者非即時的批次處理,對真實應用友善得多。影片剪輯、監控、體育賽事分析、自動標註資料集這些場景,通常畫面裡本來就有一堆要同時顧的東西。

從技術脈絡看,這是 Segment Anything 這一系的能力往影片、往多目標、往即時延伸的又一步。把「切得準」和「追得穩」還要加上「同時多個」與「即時互動」湊在一起,工程上的取捨不小,論文的價值在於證明這幾件事可以兼顧到堪用。對做影音工具、電腦視覺產品的團隊,這類基礎能力的進步會慢慢滲進實際功能。

歸剛點評:這種論文不會上大眾新聞,但它是很多你日後會用到的功能的底層地基。你在剪輯軟體裡點一下就把三個人各自去背、追一整段片,背後靠的就是這類多目標即時切割的進展。AI 圈的熱鬧多半在聊天機器人,可真正讓工具變好用的,常常是這些悶頭把單點能力做紮實的研究。

歸剛點評|推進影片物件切割在多目標、即時、可互動場景的能力,是影音編輯、監控、自動標註等眾多電腦視覺應用的底層技術基礎,代表 Segment Anything 系列能力的實用化延伸。

同期其他文章