每經(jīng)編輯｜張錦河    每經(jīng)實(shí)習(xí)編輯｜宋欣悅    

6月13日，由硅谷知名創(chuàng)投公司安德森·霍洛維茨（Andreessen Horowitz，簡稱a16z）投資的美國初創(chuàng)公司Luma AI，宣布推出其文生視頻/圖生視頻模型Dream Machine，并免費(fèi)向公眾開放。消息一出，瞬間吸引了大批用戶前來使用，服務(wù)器一度被擠爆。Dream Machine高質(zhì)量的生成效果也獲得了不少網(wǎng)友的好評。

圖片來源：Luma官網(wǎng)

Dream Machine：生成視頻質(zhì)量高、免費(fèi)向公眾開放試用！

就在今天，Luma AI首發(fā)了自己的視頻生成模型Dream Machine，可以通過文字或圖片生成高質(zhì)量的逼真視頻。更重要的是，API免費(fèi)向全球用戶開放試用，用戶進(jìn)入官網(wǎng)后用谷歌賬號登錄即可馬上試用。

圖片來源：X

每位用戶每月可以免費(fèi)生成30次視頻，但每條視頻的時長僅為5秒。如果需要生成更多視頻，則需要訂閱付費(fèi)服務(wù)。

圖片來源：Dream Machine

盡管該模型承諾，在120秒內(nèi)生成一個包含120幀的高質(zhì)量視頻。但實(shí)際上，許多用戶表示，他們需要在Dream Machine網(wǎng)站上排隊(duì)等待數(shù)小時，才能得到生成的視頻，社交媒體上抱怨聲不斷。有網(wǎng)友表示：“苦苦等了倆小時，啥也沒有。”

圖片來源：Reddit

對此，Luma AI的增長負(fù)責(zé)人戴高樂（Barkley Dai）在該公司的Discord頻道上回應(yīng)：“目前我們面臨極高的需求，正在努力增加我們的處理能力。所有生成的內(nèi)容不會丟失，只是大家會暫時排隊(duì)等待。”

圖片來源：Discord

不過好在，Dream Machine的視頻生成表現(xiàn)，沒有辜負(fù)網(wǎng)友們的耐心等待。從Luma官方發(fā)布的demo就可以看出，其生成的視頻可謂是“電影感”十足。

圖片來源：Luma官網(wǎng)

Dream Machine生成的視頻，不僅有比較好的連貫性，鏡頭的藝術(shù)感也非常不錯。它還支持自由變換攝像機(jī)視角，實(shí)現(xiàn)追蹤、環(huán)繞和俯視等效果，讓攝像機(jī)運(yùn)動更加流暢自然，用戶可以輕松嘗試各種電影化的攝像機(jī)移動，制作出更具吸引力的視頻。此外，demo還單獨(dú)強(qiáng)調(diào)了一些模型能力，比如生成各種動態(tài)以及具有表現(xiàn)力的人物。

圖片來源：Luma官網(wǎng)

盡管Luma的Dream Machine在視頻生成方面表現(xiàn)出色，但它仍然存在一些不足之處。

例如，在形態(tài)轉(zhuǎn)換和運(yùn)動捕捉方面，仍需進(jìn)一步優(yōu)化和改進(jìn)。不過，Luma Labs團(tuán)隊(duì)在其官網(wǎng)上，表明他們已經(jīng)意識到這些挑戰(zhàn)的存在，會持續(xù)努力解決的。

Luma AI：完成4300萬美元B輪融資的初創(chuàng)公司

Luma成立于2021年，聚焦于3D內(nèi)容生成的計(jì)算機(jī)視覺，公司定位于建立多模態(tài)人工智能，拓展人類想象力和能力。今年1月，Luma完成了由a16z獨(dú)家投資的4300萬美元B輪融資。此前，Luma在A輪融資中獲得了英偉達(dá)等知名機(jī)構(gòu)的投資。

圖片來源：Luma官網(wǎng)

Luma的主要業(yè)務(wù)為使用AI技術(shù)生成高質(zhì)量的3D角色和場景，公司的技術(shù)和產(chǎn)品包括使用深度學(xué)習(xí)和計(jì)算機(jī)視覺算法的 Text-to-3D（文字生成3D）、Video to 3D（視頻生成3D）、 Image to 3D（圖片生成3D）等技術(shù)以及開發(fā)的 LumaNeRF 算法，可以用于快速生成各種類型的3D模型。

產(chǎn)品主要應(yīng)用場景包括生活記錄、游戲制作、動畫和影視制作、商品展示和銷售、地圖和導(dǎo)航、機(jī)器人等。

圖片來源：Tracxn

阿米特·賈因（Amit Jain）是Luma AI的創(chuàng)始人兼CEO，畢業(yè)于密蘇里谷學(xué)院的數(shù)學(xué)與計(jì)算機(jī)科學(xué)專業(yè)，在3D計(jì)算機(jī)視覺、機(jī)器學(xué)習(xí)等方面有著豐富的經(jīng)驗(yàn)，曾在Apple的AR/VR 部門任職。另一位聯(lián)合創(chuàng)始人兼CTO余思賢（Alex Yu），畢業(yè)于UCB計(jì)算機(jī)科學(xué)與應(yīng)用數(shù)學(xué)專業(yè)，曾與人工智能研究實(shí)驗(yàn)室教授金澤安珠（Angjoo Kanazawa）共同進(jìn)行NeRF相關(guān)的 3D 計(jì)算機(jī)視覺研究，并曾在Adobe和Google實(shí)習(xí)。

圖片來源：Luma官網(wǎng)

每日經(jīng)濟(jì)新聞綜合公開消息