Adobe將推出文本轉視頻生成AI工具
鞭牛士報道,9月11日消息,據外電報道,Adobe 透露了即將推出的一些生成式 AI 視頻工具,其中包括一項新功能,該功能可以從靜態(tài)圖像中生成視頻片段。
該最新預覽版以該軟件巨頭 4 月份展示的正在開(kāi)發(fā)的 Firefly 視頻模型為基礎,該模型將為 Adobe 的 Creative Cloud 應用程序中的 AI 視頻和音頻編輯功能提供支持。
新的宣傳片展示了 Firefly 的文本轉視頻功能所制作的素材,Adobe 于今年早些時(shí)候宣布了該功能(但并未演示)。該工具允許用戶(hù)使用文本描述生成視頻剪輯,并使用模擬攝像機角度、運動(dòng)和拍攝距離的各種“攝像機控制”調整結果。還演示了 Firefly 視頻模型的圖像轉視頻功能,該功能可以使用特定的參考圖像生成剪輯。
Adobe 表示,此功能可能有助于制作額外的 B-roll 素材或填補制作時(shí)間表中的空白。
如果示例視頻可以作為最終版本的指示,那么生成的視頻質(zhì)量看起來(lái)與我們迄今為止從 OpenAI 的 Sora 模型中看到的一樣,Adobe 也在“探索”將其作為其 Premiere Pro 視頻軟件的第三方集成。
不過(guò),持續時(shí)間有限,Adobe 的生成 AI 副總裁 Alexandru Costin 告訴The Verge,通過(guò)文本轉視頻和圖像轉視頻功能制作的視頻最長(cháng)為五秒。
Adobe 自己的模型相對于 Sora 的一個(gè)優(yōu)勢是,它承諾 Firefly 是“商業(yè)安全的”,因為它是在公開(kāi)許可、公共領(lǐng)域和 Adobe Stock 內容吉印通行訓練的,這可以減少一些對侵犯版權的擔憂(yōu)。
文本轉視頻和圖像轉視頻功能將在今年晚些時(shí)候作為獨立 Firefly 應用程序首次推出測試版。
Adobe 表示,新的 Firefly 視頻模型最終將集成到其 Creative Cloud、Experience Cloud 和 Adobe Express 應用程序中。
該公司還展示了 Premiere Pro 即將推出的Generative Extend功能的一些附加片段,該功能可以延長(cháng)現有視頻片段的長(cháng)度,類(lèi)似于Photoshop 用于圖像背景的 Generative Expand 工具。
Adobe 表示,該功能也將于今年晚些時(shí)候在未指定的日期推出。