【新智元導讀】 GoogleResearch Lead，負責VideoPoet計畫的蔣路，即將加入TikTok，負責影片產生AI的開發。 谷歌VideoPoet計畫Research Lead，CMU兼職教授蔣路的Google Scholar資料顯示已加入TikTok。 最近，有傳聞TikTok招募了某篇論文的作者作為北美技術部門負責人，研發能和Sora對抗的影片生成AI。 而蔣路3週前在Linkedin上發布了離職谷歌的消息，也向外界揭開了謎底。

最近一波視訊生成模型突然出現，在許多情況下展示了令人驚嘆的如畫質量，例如Runway、Pika。然而目前影片產生的瓶頸之一是產生連貫大運動的能力。在許多情況下，即使是目前領先的大模型也會產生較小的運動，或者當產生較大的運動時，會表現出明顯的偽影。 谷歌剛剛發布了零鏡頭視訊生成大模型VideoPoet。 它能夠執行各種視訊生成任務，包括文字到視訊、圖像到視訊、視訊風格化、視訊修復和修復，以及視訊轉音訊。該工具被感嘆是一個突破性文生視訊工具。 目前市場上一些領先的視訊生成模型都是基於擴散的，然而，VideoPoet 不是。

【導讀】 Google全新視訊生成模型VideoPoet再次引領世界！十秒超長影片生成效果碾壓Gen-2，還可進行音訊生成，風格轉換。 AI影片生成，或許就是2024年下一個最前沿（juan）的領域。 回看過去幾個月，RunWay的Gen-2、Pika Lab的Pika 1.0，國內大廠等大波視訊生成模型紛紛湧現，不斷迭代升級。 不，RunWay一大早就宣布Gen-2支援文字轉語音的功能了，可以為影片創建畫外音。