用AI簡化視頻創作流程,「換境Studio」要做一站式後期編輯軟件 | 早期項目
文 | 虞景霖
編輯 | 鄧詠儀
橫空出世的Sora,以其令人印象深刻的視頻效果給世界帶來震撼,但也暴露出了一些侷限性。
一個突出的問題是,Sora可以一次性生成長達60s的視頻,缺點是無法保證多次生成片段間的連貫性。
以OpenAI官網展示出的Shy Kids的作品《air head》爲例,首先,特定場景中包含了一些不必要的元素,如氣球上意外出現的人臉圖案。
其次,在不同片段之間,同一物體的屬性(如氣球的顏色和類型)出現了不一致的變化,影響了視頻的連貫性和敘事流暢度。而模型還可能產生一些冗餘信息,如在氣球繫繩部位額外生成繩索。
來源:換境Studio
這些問題表明,Sora在生成內容可控性上存在不足,影響了視頻的敘事邏輯和連貫性。
「換境Studio」正是希望解決這些問題。創始人認爲,Sora等視頻生成工具拓展了創作邊界,展示了生產大量優質內容生成的可能性,進而帶動下游產業工具的轉型。換句話說,類Sora模型重塑了視頻內容生態行業,生產鏈條將被重新定義爲原始素材的智能化生產和精細化後期處理兩大核心階段。由類Sora等生成工具完成素材生產,換境Studio完成精細化後期處理。
來源:換境Studio
談及「換境Studio」的成立背景,創始人這樣告訴36氪:“目前,市面上大部分視頻編輯產品操作門檻較高,儘管官方提供了教程,但相對簡單,創作者想要熟練使用仍需自行摸索。”
2023年年初,團隊開始構思推出一款簡單易用的視頻特效製作軟件,並在半年後完成技術產品化路線規劃,同年10月獲得由雲天使基金投資的的300萬元種子輪融資。
以人物置換爲例,換境Studio首先對用戶上傳的素材進行解析,提取其中的人物運動、相機軌跡以及3D場景重建,從而實現類似圖層的視頻元素分離。
這種控制不同於一般的視頻生成技術,而是在3D空間上對視頻中元素進行參數級控制,以保證視頻片段的內容和邏輯連貫性。
來源:換境Studio
在調色方面,「換境Studio」實現了自動環境光匹配,通過換境Studio的編輯器,用戶可以輕鬆選擇視頻中的任何角色,藉助AI技術實現人物的自動識別、跟蹤、去除以及背景填充,免去了大量重複性的手工操作,提高視頻二次創作的效率,讓人們可以更加專注於創意性的工作。
視頻創作者是換境Studio主要面向的羣體。團隊表示,換境Studio的典型目標用戶,將是YouTube、抖音和B站等平臺上那些擁有一定創作能力和經驗的C端用戶,以及小型B端客戶。