自從 OpenAI 推出自家的文字生成影片大模型 Sora 之後,各家公司都在努力爭取早日也推出自家的文字生成影片大模型,前幾天我們才剛介紹完快手團隊打造的 KLING,最近連 Luma AI 也推出 「Dream Machine」,Dream Machine 能夠使用文字或圖片來生成影片,現在所有人都可以測試 Dream Machine,一起來看看吧~
Luma AI 推出使用文字/圖片生成影片的 Dream Machine 只要有 Google 帳號就能使用!
Luma AI 推出能夠使用文字/圖片生成影片人工智慧大模型 Dream Machine,Dream Machine 表示它能生成出物理上精確、一致且充滿活力的鏡頭。現在不管是誰都可以使用 Dream Machine 來生成影片。
點擊這裡前往使用 Dream Machine 生成影片
點擊上方連結之後會出現登入 Google 的畫面,登入之後就可以開始體驗 Dream Machine 的服務,免費帳號每個月可以生成30段影片,而且都有浮水印。小編這邊放上幾個使用 Dream Machine 製作的測試影片。
第一個使用 Dream Machine 提供的「An old lady laughing underwater, wearing a scuba diving suit, her expression denotes calm and happiness」咒語來生成影片。雖然老太太、穿著潛水服、在水底笑、看起來很開心,這幾個點都有做到但是仔細看的話老太太手的部分沒有生成好,看起來很可怕。
剛剛也有提到 Dream Machine 可以使用圖片來生成影片,但我個人測試如果你只丟一張照片給它,不要輸入任何提示詞有時候效果更好,最近很多舊照片動起來就是這樣玩的。
原始照片:
直接丟進去給LUMA生成,把 Enchance prompt 取消後直接生成:
成品效果反而好很多,最近日本一些讓過世親人動起來的影片就是這樣做的:
使用 Midjourney 生成的照片測試:
其他網友試做的效果蠻不錯的,這邊也放上幾個供大家參考:
~ 新世紀への渇望 ~
新しい時代が幕を開けた。私たちは生まれ変わり、技術の波に乗って進化を遂げる。過去を振り返ることなく未来へ向かい、絶え間なく適応し続けていく。#LumaDreamMachine @LumaLabsAI #生成AI pic.twitter.com/iCY5OWrKeS— Kaku Drop 架空飴 (@KakuDrop) June 12, 2024
Announcement trailer for “Gala”, my new feature-length film project.
Created with the just-announced @LumaLabsAI video AI model, #LumaDreamMachine.
This is nothing less than a sea change moment for AI video. Thank you to Luma Labs for allowing me to share in the release! pic.twitter.com/ynUNpFytHM
— Christopher Fryant (@cfryant) June 12, 2024
Ha! And you thought @LumaLabsAI was just about cool 3D objects. WRONG! It turns out that thousands of Gaussian splats can EASILY be turned into a POWERFUL video generation model.
I got early access!
(Envision a teaser trailer for a new streaming channel!) #LumaDreamMachine pic.twitter.com/4HFgwaHuAk
— Justin Hart (@justin_hart) June 12, 2024
Here is a quick teaser of the image2video you can make with #LumaDreamMachine, midjourney images, no face swaps, no speed ups, 1st rolls. Twitter doesn’t do it justice, needs to be seen in 4k. I will drop a full video later tonight! Make your movies! sound on @LumaLabsAI pic.twitter.com/XXCh6shcA5
— Uncanny Harry AI (@Uncanny_Harry) June 12, 2024
We had the opportunity to test out Dream Machine by @LumaLabsAI and we have been BLOWN AWAY. Here are some videos generated with their image to video model.
The model takes text and (more importantly) image to video!
The best part? You can try it out today!… pic.twitter.com/vFdFZfkK8d
— Curious Refuge (@CuriousRefuge) June 12, 2024
不知道大家看完之後有沒有對 Luma AI 的文字/圖片生成影片人工智慧大模型 Dream Machine 感興趣呢?快手團隊的 KLING 只開放擁有中國電話號碼的內測用戶生成影片,但 Dream Machine 現在開放所有人都可以使用,只要登入 Google 帳號就可以體驗使用 Dream Machine 生成影片。有興趣的朋友可以前往 Dream Machine 官方網站了解更多。