AI 創作大時代:Luma AI Dream Machine 成為 Sora 開放公開使用前的最佳 AI 影片生成服務


一、前言

OpenAI 在 2024 年 2 月推出讓大家非常驚豔的 AI 生成影片工具 Sora ,不僅可以生成最長 1 分鐘的影片,更重要的是影片在人類視覺中的物理現象流暢性與一致性,完全 KO 現有的 AI 影片生成工具。但是 Sora 目前僅開放給少數的好萊塢導演、藝術家,尚未正式開放給廣大的一般民眾使用。

Luma AI 在 6 月 12 日推出的影片生成服務 Dream Machine,對於目前 AI 影片生成工具不易控制影片前後畫面一致性的問題,有了很不錯的生成效果,讓 AI 更懂得人類眼中的世界觀與自然動態,更重要的是,Luma AI Dream Machine 已經開放給一般大眾註冊帳號,每個月可以免費生成 30 段 5 秒鐘的影片。

也因此,短短推出幾天的時間,就造成 AI 伺服務流量爆量,開始限縮每日每個帳號只能最多生成 10 段影片,每段影片的生成時間也從原本很快的 120 個影格只要 120 秒,拉長到更久的時間!

※ 20240624 更新

今天再度因為流量過大,每個免費帳號每日生成上限再降為 5 個。





即使是如此,Luma AI Dream Machine 對於影片前後畫面一致性的成果,仍讓大家看到 AI 影片生成技術的一大進步,也成為 Sora 開放公開使用前的最佳 AI 影片生成服務。


二、Luma AI Dream Machine 免費方案與生成影片尺寸介紹

目前 Luma AI Dream Machine 免費帳號每個月可以生成 30 段 5 秒鐘 (24 * 5) 的影片,每天影片的生成數量上限是 10 段影片,但不能用於商業用途,且畫面右上角會有浮水印。






Luma AI Dream Machine 生成的影片尺寸,目前測試得到的最大尺寸是 1360 * 752,暫時還無法達到 1920 * 1080 Full HD 的規格。





三、Luma AI Dream Machine 提供文字與上傳影像兩種生成影片方式




Luma AI Dream Machine 提供文字與上傳影像兩種生成影片方式,可以單純使用文字,或是只上傳圖片,也可以同時輸入文字再加上傳圖片。

1.僅上傳圖檔,無提示詞

上傳雜誌封面圖片 The City Magazine July 2015 by Runwild Media Group




生成騎摩托車 5 秒影片





2.上傳圖檔,加上簡單動作提示詞

上傳CC0免費圖片:https://pixabay.com/photos/bird-blue-clouds-weather-pen-8788491/ + The little bird hops on the branch.




生成枝頭跳躍動畫 5 秒影片





3.上傳圖檔,加上完整畫面提示詞

A group of international college students in casual wear setting up a 2-3 person Coleman Olive Hill camping tent on a mountain meadow. They are making a fire for cooking and watching the stars. The image is captured from a bird's eye view, featuring vibrant green and blue colors, in a lifestyle photography style, using V-Ray rendering technique.

一群身著休閒裝的國際大學生在山地草皮上搭起2-3人的 Coleman Olive Hill 露營帳篷。他們一邊生火煮飯,一邊看著星星。影像是從鳥瞰角度拍攝的,具有充滿活力的綠色和藍色,採用生活方式攝影風格,使用 V-Ray 渲染技術。






4.僅有文字提示詞

Fast FPV drone flythrough of a European castle, beginning with an aerial view of the towering stone walls and turrets, then gliding through an open window into the grand interior halls.

FPV 無人機快速飛越一座歐洲城堡,首先鳥瞰高聳的石牆和砲塔,然後透過打開的窗戶滑入宏偉的內部大廳。





四、5 秒影片不夠,還可以透過 Extend 加碼演出

除了下載 5 秒的影片外,還可以繼續使用 Extend 輸入新的提示詞,延長影片的時間,不過使用此功能時,需要等待的時間會比第一次生成時更久喔!





雖然原本希望能有另一隻鳥飛入,不過,它還是成功讓影片延長為 10 秒,並且加入鏡頭環境與畫面中的鳥轉為正面面對的畫面,一樣具備畫面一致性,沒有奇怪的畫面問題。




五、Luma AI Dream Machine 生成影片所帶來的真偽影片法律與道德問題

AI 工具本身並沒有好與壞之別,主要的差別在於使用目的,如果用在正向或是娛樂用途,對於提高工作效率或博君一笑都是很好的;然而,當 AI 工具應用在詐騙、武器化等領域時,卻也提高了辨識真偽的難度與侵犯隱私和人權的嚴重問題。

在現階段已經有許多使用 AI 文字與影像生成工具所生成的假訊息、假影像,Luma AI Dream Machine 加入後,會讓這類型的影片內容更加容易生成,也有更多的問題與挑戰需要去面對。



六、教學影片





※ 教學資料總整理:


※ Youtube 直播與研習記錄:



    ※ 延伸閱讀:


    留言