Adobe 預覽 AI 影片生成工具,預計今年稍晚上線
除了由文字生成影片外,也能由圖片生成,或是橋接現有的影片片段。
Adobe 在稍早正式公開了 Firefly AI 的影片生成工具,並將在今年稍晚推出 Beta 版。新的工具主要分成三個面向,分別是 Firefly 驅動的文字轉影片工具、生成性擴展工具(將在 Premiere Pro 提供)和圖片轉影片的 AI 工具。
首先,文字轉影片工具就如同字面上的那樣,可以由文字提示生成影片。和類似技術主要的不同是,它還包括了控制相機角度、運鏡和變焦等工具。生成性擴展則是可以將現有的影片稍稍延長,補上時間軸中的空白;而圖片轉影片工具則是能使用靜止參考圖像,將其轉換為令人信服的 AI 影片。Adobe 表示,其影片模型特別擅長「自然界的影片」,並有助於在沒有太多預算的情況下,快速創建定場鏡頭或 b-roll(輔助鏡頭)。
此外,Firefly AI 也將提供多項工具來編輯現有的影片片段,像是由場景中移除不需要的物體、平滑跳切過場,以及搜索完美的 b-roll 等。不過據路透社報導稱,該工具在初期只能生成最長五秒鐘的片段,因此還不太可能出現全部由 AI 製作的長鏡頭。Adobe 並表示,其 Firefly 影片模型優先著重商業安全,並且僅使用 Adobe 有權使用的內容來進行訓練,包括 Adobe Stock 的 4 億張圖像、插圖和影片。其訓練內容不包括用戶的作品,也不包含知識產權、商標或可識別的角色。
下面是 Adobe 提供的範例,可以看到它的一些使用情境:
當然,這些範例想必都是 Adobe 精挑細選後的樣品,實際的效果還要等到真正式用之後才能知道,但就像多數近期的 AI 相關發展一樣,影片生成工具讓人著迷的同時,也有著讓人恐懼的理由,特別是對於創意工作者來說,這意味著很大一部份工作將被自動化。對此,Adobe 當然是認為這能消除後製的繁瑣,讓創作者專注在創作上,但同時這也意味著有不少的業界人員,可能要因此而失業了吧?無論如何,AI 的到來已經是勢不可擋,那就只能盡量改變工作流程,來最大化利用這些新工具了。
Cinematic closeup and detailed portrait of a reindeer in a snowy forest at sunset. The lighting is cinematic and gorgeous and soft and sun-kissed, with golden backlight and dreamy bokeh and lens flares. The color grade is cinematic and magical.
Slow-motion fiery volcanic landscape, with lava spewing out of craters. the camera flies through the lava and lava splatters onto the lens. The lighting is cinematic and moody. The color grade is cinematic, dramatic, and high-contrast.
Hand-drawn simple line art, a young kid looking up into space with a wondrous expression on his face.
An adorable kawaii cheeseball on the moon smiling, 3d render, octane, soft lighting, dreamy bokeh, light sparkles floating in the background.