類Sora大模型入秋:訪問量驟降,被李彥宏潑冷水,“十年難見收益”

智東西作者 李水青編輯 心緣

當下,各路生成式AI工具落地如火如荼。

據全球知名數據機構SimilarWeb統計,2024年9月,穩居全球第一的ChatGPT網站月訪問量環比增長18.71%,達到31.24億次。同時,聊天機器人Gemini、虛擬角色伴侶Character.AI、AI寫作工具Notion AI等AI工具月訪問量也都穩定在超1億次,各個賽道展現出百花齊放的態勢。

然而,看似火熱的AI視頻生成產品賽道,卻透出絲絲的寒氣。

雖然新玩家還在不斷進入,但一線行業大佬已經帶頭“警告”。近日,百度董事長兼CEO李彥宏在2024年Q3總監會上說:“Sora這種視頻生成的投入週期太長,10年、20年都可能拿不到業務收益。無論多麼火爆,百度都不去做。”

而聚焦產品落地形勢,Sora還沒有正式推出,炙手可熱的AI視頻生成“代餐”已經熱度驟降。

據SimilarWeb統計,位居全球前列的AI視頻生成企業Luma AI網站在9月的總訪問量僅爲1181萬次,環比下跌38.49%;紅極一時的Pika在9月總訪問量僅110.8萬次,環比下跌9.78%。

再看看上半年其他幾家存在感較強的種子選手,被稱爲AI視頻生成領域的“老大哥”的Runway在9月流量僅755.8萬次,不及ChatGPT的1/400;我國知名AI創企愛詩科技推出的PixVerse在9月總訪問量爲407.7萬次,不及ChatGPT的1/700。

▲部分AI產品9月全球總訪問量情況(數據來自SimilarWeb,智東西製圖)

一邊,Meta、字節、快手等互聯網大廠都相繼入局,推出Movie Gen、Kling AI等競品;智譜AI、Minimax等大模型創企也推出了智譜清影、Video-01等新模型,讓“內卷”的競爭更具緊迫感;另一邊,AI視頻生成工具之間差異化越來越小,小頭部們用戶增長乏力已成爲不爭的事實,增長壓力一天高於一天。

Sora仍是“期貨”,而類Sora產品已經遇到肉眼可見的瓶頸,面臨入秋轉寒的生存挑戰。

一、8個月Sora“祛魅”:期貨難產、負責人跳槽、實際體驗不佳

今年2月,橫空出世的Sora一舉將AI視頻賽道變得炙手可熱。

彼時,相比Runway、Pika、PixVerse等在2023年6月-11月扎堆入場的視頻模型,Sora不僅對文本理解更深刻,可以準確地呈現提示詞,而且能在一個生成的視頻中創建多個鏡頭,準確地保留角色和視覺風格,生成長達1分鐘的質量驚豔的視頻,讓無數人驚歎:“以後可能不需要人拍電影了!”

然而8個月後的今天,OpenAI仍未推出Sora,Sora兩位負責人之一卻在10月4日宣佈跳槽去了谷歌DeepMind,這款“期貨”產品正在逐漸被人們遺忘,社交媒體的討論熱度和人們的期待程度都已經驟降。

近期的種種跡象,表明OpenAI在當時亮出這款視頻模型時,並沒有準備好。

在Sora發佈後,有一小部分紅隊測試人員和藝術家可以使用Sora。但據外媒The Information近期報道,一些試用了Sora的電影製作人體驗並不太理想。

首先,Sora生成的視頻在呈現提示詞上不夠準確。例如,電影製作人帕特里克·塞德伯格 (Patrick Cederberg)說,他必須讓模型生成數百個短片,才能找到一個可用的短片。換句話說,Sora的使用非常困難。

其次,生成視頻耗時久、一致性保持不足。比如另一位試用者稱,他最初需要10多分鐘才能生成一段時長約1分鐘的短片,而且Sora也很難在整個視頻片段中保持相同的風格,物體和角色保持一致更加困難。

此外,“恐怖谷”效應多發。一位與OpenAI高管交談過的人士稱,Sora生成的視頻總是包含奇怪的物理現象,比如憑空出現一把椅子,或者錯誤地解剖分割事物。換句話說,市面上AI視頻生成工具有的“翻車”場面,Sora也都有。

這表明,Sora在技術層面仍存在缺陷和不成熟,至少與市面上已發佈的產品相比,沒有展現出太大優勢。

一邊Sora“難產”的跡象日益明顯,另一邊Sora項目團隊也面臨動盪,爲Sora的如期出世增添了極大不確定性。

10月4日,Sora項目負責人蒂姆・布魯克斯(Tim Brooks)在社交平臺X上官宣離職,加入谷歌DeepMind。“我將加入谷歌DeepMind致力於視頻生成和世界模擬器!”布魯克斯說。這很有可能將Sora的炮彈安到了谷歌視頻生成模型Veo上,成爲進攻OpenAI的強力火炮。

▲Sora兩位負責人之一Tim Brooks發文宣佈跳槽去了谷歌DeepMind

而就在不久前的9月26日,OpenAI首席技術官米拉·穆拉蒂(Mira Murati),以及在o1模型、GPT-4o、GPT-4v模型的開發過程中扮演了重要角色的研究副總裁巴雷特·佐夫(Barret Zoph)與首席研究官鮑勃·麥克格盧(Bob McGrew)也宣佈離職。技術領頭人一個接一個離開,讓Sora研發項目的進展變得前途未卜。

研發部門靈魂人物的離開,很可能改變Sora的研發方向和節奏。

實際上,OpenAI已傳出正在重新訓練Sora,目的就是爲了讓Sora在正式發佈時還能保持優勢。

9月底,一位與OpenAI高管交談過的人士向外媒稱,OpenAI正在訓練新版Sora,希望它能快速生成質量更高、時間更長的視頻。這位人士稱,爲了訓練Sora,OpenAI收集了數百萬小時的視頻作爲訓練數據,高分辨率,幷包含多種風格和主題。

然而這個重新訓練的Sora什麼時候能跟大家見面?答案似乎是遙遙無期。

無論是Sora體驗和技術本身的缺陷,還是Sora項目團隊的動盪,亦或是“回爐重造”的消息,都指向Sora的優勢可能已經不保,也意味着AI視頻生成同行的機會在變大。

一邊,OpenAI的Sora的進展“秋風蕭瑟”;另一邊,其他AI視頻生成行業看到了自家產品的可乘之機,“熱火朝天”地發新品和招攬用戶。

二、同行加速佔領AI視頻生成市場,創企與巨頭熱戰,但寒潮已來

Sora日益降溫,AI視頻生成同行在2024年夏天已快速佔領市場,開啓多輪熱戰。

在國外,當Sora還是一個“餅”,Runway、Pika、Luma AI、Stability AI等創企已經把好用的AI視頻生成工具免費給用戶用,Meta、谷歌等硅谷科技大廠們也試圖動搖Sora的根基。

AI視頻生成領域“老大哥”Runway9月的新品已將視頻生成時長延長至40秒,幾乎追平Sora展示的效果;Luma AI比Sora效果更真實還免費,在SimilarWeb統計的全球AI產品訪問量爲AI視頻生成類工具排名第一;Pika也在2024年10月已推出Pika 1.5,更真實的運動效果和大屏幕鏡頭堪稱驚豔……

Meta於11月推出了自帶配音的文生視頻模型Movie Gen,直接用一個完整的評測體系宣告自己打敗Sora;谷歌已從團隊層面削弱Sora的戰鬥力,Sora項目兩位負責人之一已於近期加入谷歌DeepMind,爲自家AI視頻生成工具Veo注入火力……一把又一把火越燒越旺。

▲Meta發測試結果證明自家Movie Gen趕超Sora

在大洋彼岸的中國,AI創企和科技巨頭也已推出多款“中國造Sora”,在剛剛過去的夏天開啓了一輪輪熱戰。

愛詩科技、生數科技、智象未來、Morph Studio、智譜AI、Minimax等AI創企都已推出了公衆可用的AI視頻生成工具,免費策略、功能更新、玩法創新輪番轟炸;科技大廠阿里、字節跳動、快手、騰訊等也都入場攪局,對這一市場虎視眈眈。

快手推出的可靈AI在全球現象級爆紅,字節推出的即夢AI憑藉CapCut(剪映)已成爲許多短視頻博主創作必備工具,愛詩科技推出的PixVerse率先打開國際市場並多次迭代,生數科技的Vidu初步打入動漫影視圈……其中後發制人的快手7月推出的可靈AI在2024年8月訪問量達1448萬,環比增長591.54%,位列全球AI產品流量排行榜第32位,在AI視頻生成賽道排名僅次於Luma AI。

總之,在Sora靜默的這半年多裡,同行正加速佔領AI視頻生成市場。

▲部分熱門AI視頻生成產品/模型進展情況

AI視頻生成賽道的戰況在盛夏推至頂峰,但大戰入秋後的結果如何?

就在產業和市場猝不及防之際,一場寒潮已經悄然潛入,不少紅極一時的類Sora產品熱度驟降。

今年9月,根據InfoQ等科技媒體聯合推出的AI產品榜·全球降速榜,上榜的前五名中有兩名都是AI視頻生成工具:Luma AI 9月網站Web訪問量爲12.13M,環比下降38.49%,位居第二;Viggle 9月網站Web訪問量爲2.85M,環比下跌36.13%。

▲AI產品榜·全球降速榜(圖源:InfoQ)

而正如前文提到,據第三方平臺AIGCRank援引全球知名數據機構SimilarWeb數據,衆多全球AI產品2024年8月訪問量繼續上漲。排名前20的AI產品中,除了月訪問超20億的“常青樹”ChatGPT,還有AI搜索引擎Perplexity、虛擬角色JanitorAI、PDF工具Liner等多個領域的黑馬,卻未出現一個AI視頻生成工具。

▲全球AI產品2024年8月訪問量榜單(圖源:AIGCRank)

前50名單中僅出現了排名22的Luma AI,但訪問量僅1920萬,環比下跌14.9%。按照這樣的趨勢,這棵獨苗在下個月統計中很有可能被踢出前50名。

▲全球AI產品2024年8月訪問量榜單(圖源:AIGCRank)

當然,一些新晉AI視頻生成產品的增長還是不錯的,比如快手推出的Kling AI(可靈AI)海外版9月出海總榜Top1,幾乎從零開始月訪問量達1765萬次;生數科技7月在全球上線的Vidu 8月100倍增長,增速高達14158.35%。

然而,這些產品的用戶體量還是比較小,如何增長到Luma AI那樣的水平,並克服後者還未克服的瓶頸,是新入局者打響第一炮後不得不面對的問題。

而科技巨頭那邊,情況也並沒有看起來的那樣樂觀。

無論是國外的Meta、谷歌,還是國內的阿里、字節、騰訊等,佈局AI視頻生成賽道步伐都比較謹慎。它們大多數沒有推出全民級的消費產品,而是以試水爲主。背後,無疑是在衡量算力及數據的鉅額投入,與親自做AI視頻生成的收益是否成正比。

這不禁讓人思考:AI視頻賽道入秋,大廠們的餘糧也不足了?

三、視頻大模型爲何始終發佈雷聲大,落地雨點小?

當下,整個類Sora產品市場正進入一個調整期。

類Sora產品賽道的瓶頸已經展露出來。在親自體驗多款AI視頻生成工具並與多位消費者交流之後,筆者認爲,當下類Sora產品主要存在共性問題在於技術成熟度不足。具體表現在:

1、生成視頻時長限制。很多人用到的AI視頻生成工具僅能生成4-5秒的視頻,對於需要完整表達內容的創作者來說過於短暫,難以進行影視創作等商業化支持。即便一些平臺的視頻生成時間已經接近1分鐘,但仍然存在前後一致性、動態不足等問題。

2、功能更新突破性不足。過去一段時間,多家AI視頻生成廠商都對功能進行密集迭代,但大多是“錦上添花”而缺乏躍進式體驗升級。比如Pika推出了脣形同步功能LipSync、AI配音工具Sound Effects、風格選項等新功能,但並未給用戶帶來突破性的體驗,出現“同質化”趨勢。

3、等待時間過長。比如在Luma AI的Dream Machine發佈後,由於大量用戶涌入使用,服務器壓力過大,很多用戶需要排隊等待數小時才能得到生成的視頻,從而大大消耗了用戶的耐心,讓體驗打折扣。從企業角度來說,提供AI視頻生成服務是一項遠比聊天機器人更耗費算力的工作,成本壓力大。

4、高昂的付費價格。雖然各家AI視頻生成工具都推出了免費服務,但大多都有次數和質量的限制。以Dream Machine爲例,其有29.99美元的標準檔、99.99美元的專業檔以及499.99美元的高級檔等不同檔次的付費選項,高昂的價格使得當下AI視頻生成工具的性價比大打折扣,影響其熱度進一步提升。

而從外部環境來看,當下AI視頻生成在商業化方面也缺乏應用市場的刺激。

當下,在經濟增長放緩的背景下,無論是消費端用戶還是各行各業企業對AI投入都會更加謹慎。

以短視頻創作UGC市場爲例,今年7月抖音可快手兩大短視頻廠商都親自下場,分別推出《三星堆:未來啓示錄》、《山海奇鏡之劈波斬浪》兩部AI生成短劇,儘管在平臺的帶動下兩部AI短劇迅速播放破億,並吸引了不少創作者開始嘗試AI視頻生成。然而,時隔三個月,在各大平臺上並未看到AI生成短劇扎堆跟進出現的勢頭。幾位嘗試過AI的短視頻創作者告訴智東西,主要因爲當下內容賽道競爭激烈,變現更加艱難,他們更願意從話題、內容質量等方面去提升而非增大技術成本投入。

以AI被寄予高希望變革的影視行業爲例,據央視新聞報道,2024年上半年,北美電影票房35.55億美元,同比下降19.2%;據燈塔專業版,2024年國慶檔(10月1日-10月7日)票房同比去年的27.36億下滑了23%……在這種背景下,即便已經有不少影視人、短視頻創作者選擇AI視頻生成工具進行創作,但付費意願卻不高。

向內看AI視頻生成技術發展仍不成熟,向外看AI視頻生成賽道的商業化外部條件不足,這也解釋了爲什麼視頻大模型始終發佈雷聲大,落地雨點小。

結語:冷靜看待AI產品熱,AI視頻賽道仍需等風來

當人們熱衷於AI產品的火熱落地時,AI視頻生成工具已經悄然入秋,Sora的難產和AI視頻生成同行的瓶頸不容忽視。只有冷靜看待技術產業賽道的週期性特點,企業和產業才能夠在日益激烈的競賽中拔得頭籌。

旱季長根系,雨季長葉子。與聊天機器人、虛擬角色、翻譯工具等賽道相比,AI視頻生成目前的剛需賽道影視製作行業本身面臨下行壓力,阻礙了AI視頻生成產品的商業化落地。寒冬隨時可能到來,類Sora產品玩家在技術迭代和產品擴張時,只有保證生存下來才能在來年春天等到風來。