今年初OpenAI公佈的生成式AI影片服務Sora引發市場震撼,本週又有另一家新創公司公佈能產生同樣高品質影片的AI服務,名為Dream Machine。
這家新創公司是總部位於舊金山的Luma AI,於2021年創立。根據 Techcrunch報導 ,該公司創辦人之一的Alex Yu是柏克萊大學的AI研究人員,Amit Jain則曾在蘋果擔任Vision Pro多媒體體驗開發。該公司去年11月才募得430萬美元,今年初就在B輪中募到了4,300萬美元。
近日Luma AI公佈的 Dream Machine 是類似Open AI的Sora,可讓用户輸入自然語言生成逼真的影片。Dream Machine號稱2分鐘就能產出每秒120影格的5秒流暢、高畫質的短影片。根據網站描述,它是直接以影片訓練的高擴充性及高效的transformer模型,能產生精準、一致化而精緻的場景。
Dream Machine也是該公司打造統合式「想像力引擎」的第一步,昨日Dream Machine開放大眾試用。不過,首日上線後卻因網路塞車引來抱怨。 Techradar 花了超過20分鐘才看到影片。 另有報導指出 ,有不少用户等了數小時。
Luma AI產品與成長部門主管Barkley Dai透過 該公司Discord帳號 説明,公司面臨極高運算需求,正在緊急增加頻寬。他稍後補充説,雖經增加頻寬,但仍需數小時來消化已發出的處理呼叫。該公司仍強調正常情況下只要2到3分鐘,就能將文字指令轉化成影片。
Dream Machine是Luma AI最新成果。這家新創去年11月 公佈3D模型重建模型Luma ,可讓使用者透過拍攝照片來建立3D模型。今年初,該公司又發表Genie,將用户輸入的文字轉化成3D模型。此外, 它還提供一項服務 ,用户可將錄下的一段影片上傳就能產出影片中的3D場景,可加速遊戲或電影製作。