《晚點 LatePost》獲悉,螞蟻集團已于近期獨家投資了中國視頻生成大模型公司愛詩科技的 A2 輪,該輪金額超過 1 億元人民幣。
接近螞蟻的人士說,螞蟻除自研大模型并落地應用外,也在持續關注行業的前瞻探索,圍繞大模型技術能力、產業應用和 AI 算力等核心技術和生態,已陸續投資了智譜 AI、月之暗面等大模型創業公司和專注多模態的生數科技等。
愛詩科技成立于 2023 年 4 月,目前團隊約有 30 人,創始人兼 CEO 王長虎曾任字節跳動視覺技術負責人,在視頻理解、數據處理、內容安全和視頻生成等領域都有積累。
愛詩科技既做視頻生成大模型,又做面向內容創作者和普通人的視頻生成產品。
愛詩科技稱自己 2023 年 6 月以來就選擇 DiT(Diffusion Transformer)架構,這是一種 2022 年底被提出的新型擴散模型,DiT 也被認為是 Sora 背后的架構。
1 月,愛詩科技上線了視頻生成產品 PixVerse,用戶在 PixVerse 網頁版界面里輸入文字或圖片就能生成視頻。目前 PixVerse 生成的視頻時長為 4 秒,產品免費。
據第三方監測平臺 SimilarWeb 的數據,上線 3 個月來,PixVerse 的月訪問量超過 115 萬,上線早兩個月的 Pika 是 226 萬,2023年中旬就可以生成 18 秒視頻的 Runway 的月訪問量則超過 668 萬,該數據不包括 Runway 在 App 端的數據,大量 Runway 用戶可能會直接使用 App。目前 PixVerse 和 Pika 尚沒有 App。
在廣告、影視等領域,現在不少從業者已習慣先用 Midjourney 生成圖片,再轉給 PixVerse 生成視頻。
Sora 激起了更多視頻模型和應用的競爭。
據了解,一季度,字節 AI 研發團隊提升了視頻生成模型的優先級,此前優先級最高的是大語言模型和文生圖模型。原 Google 資深科學家蔣路在 2 月加入字節跳動,他曾是 Google 視頻生成模型 VideoPoet 項目的負責人。字節此前已推出視頻生成模型 MagicVideo-V2。
同樣在視頻領域有數據和經驗積累的騰訊,在 2023 年 12 月和 2024 年 1 月分別發布了 AnimateZero 和 VideoCrafter2 兩個模型。
阿里 2020 年就在做多模態大模型,它在 2023 年下半年發布了視頻生成模型 I2VGen-XL。
創業公司中,國內的視頻生成產品已有右腦科技的 Vega AI、MewXAI 的藝映 AI、HiDream.ai(智象未來)的 Pixeling、新壹科技的一幀秒創,以及 Never Ends 和 Morph Studio 等。
目前大部分視頻生成產品可以生成的時長大多在 4 到 7 秒,而 Sora 能一次性生成 60 秒視頻。從發布時展示的例子看,Sora 生成的視頻在畫面的運動平滑度、動作連續性、物理真實性和成像質量上都表現較好。
王長虎認為,15 秒的視頻時長是一個節點:15 秒意味著能呈現一套完整動作、傳達一段有意義的內容。要把視頻時長從 4 秒做到 15 秒,考驗的是模型能力,包括理解提示指令(prompt)、模擬物理世界的規律、生成準確的畫面動作等等。具備生成 15 秒視頻的能力,就具備在更長時間的視頻里保證畫面主體和背景一致性的能力。從 15 秒再到 60 秒,按照 Scaling Law 逐步擴大即可。
不少從業者和投資人認為,Sora 之所以會表現出更強的能力,源于背后 OpenAI 的多模態模型 GPT-4V,而 GPT-4V 的能力又建立在 GPT-4 的理解能力上,所以大語言模型能力強的公司,更有可能做好視頻生成模型等多模態模型。
Sora 雖然發布效果驚艷,卻至今仍未對更多開發者和普通用戶開放。這和 OpenAI 以往的風格不同——從 2020 年的 GPT-3 開始,OpenAI 每發布一個產品,都會迅速讓更多人用起來。
Sora 的反?赡芤驗楫a品還不夠成熟。目前業界的信息是,Sora 生成 60 秒的視頻需要 20-30 分鐘,這意味著昂貴的運算成本,越多人用成本越高。
也有人認為,Sora 生成視頻的質量可能還不夠穩定,年初震撼世界的幾個視頻可能是挑選后的最好結果。
提高穩定性和效果的同時降低成本,也是所有視頻模型公司和試圖做視頻生成的大語言模型公司接下來要解決的問題。
王長虎此前表示,如果去年有更多的資源和算力,愛詩科技可以比 Sora 更早做出能生成 60 秒視頻的模型,F在,更多的錢已經到位。
文章內容僅供閱讀,不構成投資建議,請謹慎對待。投資者據此操作,風險自擔。
海報生成中...
海藝AI的模型系統在國際市場上廣受好評,目前站內累計模型數超過80萬個,涵蓋寫實、二次元、插畫、設計、攝影、風格化圖像等多類型應用場景,基本覆蓋所有主流創作風格。
IDC今日發布的《全球智能家居清潔機器人設備市場季度跟蹤報告,2025年第二季度》顯示,上半年全球智能家居清潔機器人市場出貨1,2萬臺,同比增長33%,顯示出品類強勁的市場需求。