極客號（Daydx.com）11月3日 消息:總部位于紐約的生成式 AI 視頻初創(chuàng)公司 Runway 今天更新了其標(biāo)志性的文本/圖像/視頻到視頻模型 Gen-2，其更新再度引發(fā)AI視頻領(lǐng)域關(guān)注。
這一更新顯著提高了視頻的質(zhì)量和一致性，有人將其稱為“具有重大影響的游戲變革”，有人認(rèn)為這是“生成式AI的關(guān)鍵時(shí)刻”。
Gen-2于2023年3月首次亮相，通過其專有的AI基礎(chǔ)模型，允許用戶使用文本提示生成全新的四秒視頻，或上傳圖像，讓Gen-2為其添加運(yùn)動(dòng)。與Gen-1不同，Gen-2不需要用戶上傳現(xiàn)有視頻片段。
隨著時(shí)間的推移，Runway還為Gen-2增加了新功能，稱為“導(dǎo)演模式”，使用戶可以選擇Runway AI生成視頻中的“相機(jī)”移動(dòng)的方向和強(qiáng)度/速度。這些移動(dòng)是模擬的，以代表持有真實(shí)相機(jī)拍攝場景的感覺，但內(nèi)容完全由Runway的Gen-2模型即興創(chuàng)建。用戶可以在網(wǎng)絡(luò)應(yīng)用程序或iOS應(yīng)用中快速縮放物體，左右移動(dòng)主題，甚至選擇在視頻中部分添加運(yùn)動(dòng)。
此次更新使完全由AI生成的主題或靜止圖像主題的運(yùn)動(dòng)更加流暢、清晰、高清和逼真。根據(jù)一位名為@TomLikesRobots的AI藝術(shù)家的說法，Gen-2從靜止圖像生成的視頻的分辨率從1792×1024升級到2816×1536。
AI創(chuàng)作者和電影制作者可以通過上傳由其他來源生成的AI圖像，例如Midjourney，從零開始生成整個(gè)AI制作，盡管是短暫的。借助這些18秒的短片，AI電影制作者已經(jīng)創(chuàng)作出一些引人入勝的長篇作品，包括在電影院放映的音樂視頻。
Runway的創(chuàng)始人兼首席執(zhí)行官Cristóbal Valenzuela是AI的熱情倡導(dǎo)者，早在2015年谷歌的DeepDream模型時(shí)代就成為技術(shù)的追隨者。他對公司的這一新更新充滿信心，他在社交網(wǎng)絡(luò)X上寫道:“技術(shù)是一個(gè)工具，允許我們講述超乎想象的故事并創(chuàng)造世界。”
他隨后發(fā)布了一系列信息，以“創(chuàng)意軟件已死”為開端。盡管這是一項(xiàng)大膽的宣言，但在隨后的信息中，Valenzuela解釋說，以前的軟件允許人類用戶通過“推動(dòng)像素”來手動(dòng)創(chuàng)建，而AI驅(qū)動(dòng)的應(yīng)用程序和模型如Runway的Gen-2現(xiàn)在為我們完成了手動(dòng)工作，用戶只需以更高級別的自然語言或調(diào)整參數(shù)來指導(dǎo)機(jī)器。這些工具現(xiàn)在更多地完成工作，因?yàn)樗鼈兡軌蚶斫夂筒僮髅襟w的底層，以一種以前的軟件無法做到的方式。
顯然，Valenzuela和許多Runway的員工和用戶都受到了Gen-2更新的啟發(fā)。他們的技術(shù)能走多遠(yuǎn)尚有待觀察，但初步跡象表明，AI電影制作正在成為本世紀(jì)的一項(xiàng)重要?jiǎng)?chuàng)意力量，或許與20世紀(jì)20年代原始物理電影制作嶄露頭角的情況類似。
