AI視訊生成一夜被顛覆:Runway重磅發佈Gen-4,保真度、動態性、一致性全面升級


今天,專注於視訊生成的 Runway 公司正式推出了他們的新一代模型系列 —— Gen-4。我就說Runway 這麼長時間憋啥大招呢,模型直接上線,沒有套路,最牛的是Gen-4解決了場景一致性問題,還有視覺特效加持

下面給大家第一時間劃個重點:

簡單來說,Gen-4 在視訊生成的保真度動態運動捕捉和可控性上都樹立了新的標準,相較於之前的 Gen-3 Alpha 版本,提升非常明顯

它的核心優勢在於:

1. 高動態與真實感:能生成運動軌跡極其逼真、充滿動態感的視訊內容

2. 高度一致性:無論是視訊中的主體人物、物體,還是整體的藝術風格,Gen-4 都能保持高度連貫統一

3. 精準理解與執行:對使用者輸入的提示詞(prompt)理解更深刻,執行更到位,並且擁有頂尖的“世界理解”能力,讓生成內容更符合邏輯和物理規律

視覺參考+指令=精準創作

Gen-4 的一大亮點在於它能利用視覺參考(比如你提供一張圖片或一段視訊)結合文字指令,來創造新的圖像和視訊。這意味著你可以指定某個角色、特定風格或場景,讓 AI 在此基礎上進行創作,確保內容的連續性和你對故事走向的掌控力

實戰檢驗:短片作品展示 Gen-4 強大實力

為了展示 Gen-4 的敘事潛力,Runway 團隊用它製作了一系列短片和 MV:

《The Lonely Little Flame》:這部短片完全由 Gen-4 生成,展示了其端到端的創作能力

《New York is a Zoo》:集中體現了 Gen-4 驚人的視覺特效(VFX)潛力。製作團隊先通過 Gen-4 的 References 功能,將真實的動物參考圖和紐約實景照片融合,再結合提示詞指定具體動作,最終效果是將超寫實的動物無縫置入了紐約的電影感場景中

《The Herd》:這部短片講述了一個年輕人在夜晚被牛群追逐的故事。僅用了幾張圖片作為參考,Gen-4 就建構出了角色形象和迷霧籠罩的牛群場景,最後再結合 Act-One 工具將故事串聯起來

《The Retrieval》:一部動畫風格的短片,講述探險者尋找神秘花朵的故事,同樣完全由 Gen-4 製作

如何用上 Gen-4?

好消息是,Gen-4 的圖像生成視訊)功能,現在已經面向所有 Runway 的付費方案使用者企業客戶正式推送。而備受期待的 References(視覺參考)功能也將在不久後上線

試用地址:

https://app.runwayml.com/login

更多關於 Gen-4 的技術細節和研發背景,可以訪問官方發佈頁面:

http://runwayml.com/research/introducing-runway-gen-4

(AI寒武紀)