自動(dòng)駕駛團(tuán)隊(duì)進(jìn)軍好萊塢?打造電影級(jí)Sora,Odyssey開啟「荷馬史詩」新篇章

新智元 整合編輯:太平洋科技 發(fā)布于:2024-07-09 16:58

在好萊塢歷史上,有幾只動(dòng)物演員因其杰出的表演而聲名鵲起,成為了家喻戶曉的明星。

例如,華納百年,第一位稱得上明星的不是男星,也不是女星,而是德國牧羊犬Rin Tin Tin。

一戰(zhàn)結(jié)束后,它被美國大兵李鄧肯從戰(zhàn)場帶回國,在20世紀(jì)20年代到30年代參演了多部影片,成為了當(dāng)時(shí)最受歡迎的電影明星之一,被譽(yù)為「銀幕上的英雄」。

電影海報(bào),Rin Tin Tin獨(dú)占大字和視覺中心,誰是電影頭牌一目了然

Rin Tin Tin在處理堆成小山的熱情影迷來信

還有美劇《歡樂一家親》中的Moose,因其在劇中的出色表演而成為了另一個(gè)廣受觀眾喜愛的動(dòng)物明星。

這些著名的動(dòng)物演員不僅證明了動(dòng)物在表演藝術(shù)中的天賦,也展現(xiàn)了它們在敘述故事和觸動(dòng)人心方面的獨(dú)特能力。

然而,隨著CGI和AI技術(shù)的進(jìn)步,越來越多的制片方傾向于使用數(shù)字創(chuàng)作來塑造電影中的動(dòng)物角色,這不僅因?yàn)樗軌虮苊馍婕皠?dòng)物權(quán)益的爭議,還因?yàn)閿?shù)字創(chuàng)作在制作過程中提供了更大的靈活性和控制度。

好萊塢的巨頭們,如迪士尼、索尼、華納兄弟等,早已將AI技術(shù)納入戰(zhàn)略規(guī)劃。

另一邊,AI科技巨頭也嗅到了好萊塢的商機(jī),今年3月底,OpenAI曾與派拉蒙、環(huán)球和華納兄弟探索等高管見面,展示其Sora模型。

并且已經(jīng)向一些大牌演員和導(dǎo)演授予了Sora的訪問權(quán)限,據(jù)參與該會(huì)議的人士透露,OpenAI明確請求工作室的高管們幫助其推廣Sora。

而最近,Odyssey,一款好萊塢級(jí)別的視覺AI技術(shù),也宣布將進(jìn)軍好萊塢電影制作。

自動(dòng)駕駛駛向好萊塢?

有趣的是,Odyssey是由一幫早前做自動(dòng)駕駛的人組成。

Cruise前產(chǎn)品副總裁Oliver Cameron、Wayve前技術(shù)副總裁Jeff Hawke成立了Odyssey,宣稱要打造好萊塢級(jí)別的視覺AI,該公司的研究人員來自Cruise、Wayve、Waymo、特斯拉、Meta等公司。

兩位自動(dòng)駕駛汽車公司的資深人士正試圖在好萊塢大展拳腳,不是作為演員,而是作為人工智能軟件的開發(fā)者,未來的大片將在這些軟件上誕生。

他們在舊金山創(chuàng)辦了一家名為Odyssey的初創(chuàng)公司,與OpenAI、Runway和Metaphysic等公司競爭,為專業(yè)電影制作人和動(dòng)畫師提供工具,志在向早期皮克斯看齊,使命是提供創(chuàng)作電影、電視節(jié)目和視頻游戲的更好方式。

Cameron說,雖然出身自動(dòng)駕駛汽車領(lǐng)域,但這段經(jīng)歷讓兩位聯(lián)合創(chuàng)始人深知收集自己的真實(shí)世界數(shù)據(jù)集來訓(xùn)練模型的重要性。

與其他依靠在互聯(lián)網(wǎng)上搜索視頻數(shù)據(jù)為AI軟件提供素材的文字視頻公司不同,Odyssey正在現(xiàn)實(shí)世界中收集自己的三維數(shù)據(jù)集,并以此為模型提供素材。

互聯(lián)網(wǎng)上根本沒有足夠大的三維數(shù)據(jù)集來建立足夠規(guī)模和能力的AI模型,以滿足Odyssey的需求。

他和Hawke在自動(dòng)駕駛汽車方面的經(jīng)驗(yàn)讓他們對如何收集Odyssey所需的真實(shí)世界數(shù)據(jù)有了一些巧妙的想法,不過Cameron拒絕公開透露其中的方法。

今天,Odyssey從近一年的沉淀中脫穎而出,獲得了來自GV(谷歌風(fēng)投,Alphabet 的風(fēng)險(xiǎn)投資部門)的900萬美元種子資金,DCVC、Air Street Capital以及十多位個(gè)人早期投資者和天使投資人也參與了投資。

Odyssey的AI軟件在某些方面與OpenAI的Sora或Runway的Gen 3相似,都是將場景或鏡頭序列的文字描述轉(zhuǎn)化為高質(zhì)量的電影短片。

到目前為止,Sora只向少數(shù)初始測試用戶發(fā)布,但OpenAI在今年2月發(fā)布的精彩演示卻讓好萊塢惶恐不安。

電影制片人Tyler Perry在看過Sora的演示后表示,他將「無限期擱置」在亞特蘭大耗資8億美元擴(kuò)建電影制片廠的計(jì)劃,因?yàn)镾ora讓他懷疑傳統(tǒng)制片廠在未來是否還有用武之地。

演員兼科技投資人Ashton Kutcher表示,他也相信人工智能將很快讓任何人都能創(chuàng)作一部電影,而無需演員、攝制組或好萊塢的巨額預(yù)算。

用AI講好故事

在Odyssey官網(wǎng)釋出的視頻展示和內(nèi)容可以看出,Odyssey的一個(gè)核心概念是:用AI更好地講故事。

從最早的祖先圍著篝火講故事到創(chuàng)作了小說《伊利亞特》、《奧德賽》和《一千零一夜》,再到創(chuàng)作電影作品,視覺特效將我們帶向了遙遠(yuǎn)的國度,聆聽一個(gè)個(gè)生動(dòng)形象的故事。

隨著技術(shù)的發(fā)展,故事的講述方式也在不斷演變。然而,有一點(diǎn)始終不變,偉大的故事都是血汗和淚水的結(jié)晶,而Odyssey就決定用AI講故事。

如今,在網(wǎng)絡(luò)上轉(zhuǎn)一圈就會(huì)發(fā)現(xiàn),低質(zhì)AI生成內(nèi)容充斥著我們的生活。

低質(zhì)短視頻、垃圾機(jī)器人,許多公司都在利用人工智能制作文字和圖像,吸引你的注意力。

如果處理不當(dāng),AI視頻生成也會(huì)朝著類似的方向發(fā)展,我們會(huì)被大量沒有火花和內(nèi)核的隨機(jī)視頻淹沒。

如果時(shí)間足夠長,也許我們就會(huì)沉迷于這些垃圾視頻,忘記高質(zhì)量的故事是什么樣子。也許人類將淪為故事的觀看者,而不是故事的講述者。

Odyssey就反對這種短頻快的低質(zhì)視頻接收。他們認(rèn)可講故事對生活方式的重要性,正如一代代已經(jīng)證明,優(yōu)秀的故事可以提供非常豐富的精神食糧。

同樣,強(qiáng)大的人工智能也是如此,但是需要技術(shù)的進(jìn)步和正確的構(gòu)建。

Odyssey認(rèn)為,與其研究一個(gè)個(gè)優(yōu)化點(diǎn)擊率的算法,不如讓專業(yè)講故事的人掌握一種新的視覺人工智能。

這種視覺人工智能不僅能讓他們制作出令人驚嘆的視頻,還能利用先進(jìn)的技術(shù),讓腦海中的史詩故事走向大熒幕。

Odyssey的野心:視覺效果對標(biāo)好萊塢級(jí)

要想讓AI為好萊塢服務(wù),它必須能夠制作出高質(zhì)量、無閃爍、震撼人心的視覺效果。

但到目前為止,這些模型只能生成不到一分鐘的短視頻序列,而且不能保證在整個(gè)序列中人物和背景保持一致。

Odyssey首席執(zhí)行官Oliver Cameron表示,Odyssey公司希望為電影制作人提供對AI生成的鏡頭更精細(xì)的控制,并且保證鏡頭一致性,以及更逼真的光影視覺效果。

Cameron告訴《財(cái)富》雜志,Odyssey被設(shè)計(jì)為「好萊塢級(jí)」視覺人工智能,旨在為「世界上最瘋狂的創(chuàng)作者」賦能。

他以導(dǎo)演詹姆斯-卡梅隆(James Cameron)和他的《阿凡達(dá)》(Avatar)電影為例,每部電影的制作時(shí)間都超過十年,涉及數(shù)百名視覺特效藝術(shù)家,耗資數(shù)億美元。

Odyssey希望在不犧牲視覺質(zhì)量的前提下,將時(shí)間和成本降低到一個(gè)五人團(tuán)隊(duì)花費(fèi)五萬美元、工作六個(gè)月。

為了實(shí)現(xiàn)「好萊塢級(jí)」視覺效果的愿景, Odyssey正在開創(chuàng)好萊塢級(jí)別的視覺人工智能,在這里,美麗的場景、人物、光影和動(dòng)作都可以生成和引導(dǎo)。

此外,Cameron說,Odyssey正在開發(fā)的軟件不僅僅是一個(gè)從文字到視頻的模型,而是一個(gè)模型家族。

專門從事四項(xiàng)不同的任務(wù):生成三維圖形渲染、生成材料效果(如水或布)、生成運(yùn)動(dòng)效果,最后生成光影效果。

環(huán)境三維渲染:

生成不同材質(zhì)紋理:

生成運(yùn)動(dòng)效果:

生成光影視覺效果:

傳統(tǒng)的文本到視覺模型相比,這種功能的實(shí)現(xiàn)需要更深的技術(shù)層次。

通過訓(xùn)練四個(gè)功能強(qiáng)大的生成模型,這些模型能夠?qū)σ曈X的每個(gè)層次進(jìn)行微調(diào)控制,而不是訓(xùn)練一個(gè)模型,只能進(jìn)行單一輸入和單一不可編輯的輸出。

Odyssey旨在讓創(chuàng)作者對場景中的每個(gè)元素進(jìn)行全面、微調(diào)的控制。

從壯麗的山脈、茂密的植被、美麗的河流,到打光運(yùn)用、人物運(yùn)動(dòng)等都可以全方位操控。

簡而言之,這是一種創(chuàng)作電影、電視節(jié)目和視頻游戲的全新方式。

4個(gè)模型協(xié)調(diào)運(yùn)作,形成視頻幀。因此,Odyssey能夠生成集高質(zhì)量的三維圖形、逼真的材質(zhì)、令人驚嘆的光影和可控的運(yùn)動(dòng)為一體的高質(zhì)量視頻。

并且,每個(gè)模型的輸入也不局限于文本,甚至包括人類創(chuàng)作者用手寫筆繪畫或靜態(tài)數(shù)字圖像。

更重要的是,Odyssey正在圍繞這些模型建立專為高級(jí)用戶量身定制的工作流程,并與好萊塢、游戲和其他領(lǐng)域使用的現(xiàn)有制作工作流程進(jìn)行一流的集成。

這將使電影制片人和專業(yè)視覺特效師(他們是 Odyssey 軟件的目標(biāo)用戶)對最終輸出擁有極大的創(chuàng)作自由,而目前的文本到視頻人工智能模型無法做到這一點(diǎn)。

本文來源:新智元

網(wǎng)友評(píng)論

聚超值•精選

最新內(nèi)容

自動(dòng)駕駛團(tuán)隊(duì)進(jìn)軍好萊塢?打造電影級(jí)Sora,Odyssey開啟「荷馬史詩」新篇章

Odyssey視覺AI發(fā)布預(yù)告,旨在用AI技術(shù)講好電影故事。具備強(qiáng)大的視覺內(nèi)容生成與控制能力,視覺效果對標(biāo)好萊塢制作水平。由自動(dòng)駕駛團(tuán)隊(duì)打造,該技術(shù)將為電影制作人提供更精細(xì)的控制和逼真的光影效果。目標(biāo)是降低成本和時(shí)間,并賦能創(chuàng)作者實(shí)現(xiàn)高質(zhì)量視頻創(chuàng)作。

自動(dòng)駕駛團(tuán)隊(duì) | 好萊塢級(jí)視覺AI
體驗(yàn)完享界S9,我覺得它真懂老板的用車需求。

華為發(fā)布了其第三款“享界”電動(dòng)車型S9,定位為行政級(jí)轎車。該車在外觀和內(nèi)飾上與寶馬5系、奧迪A6等相似,但更接近于這些中型豪華轎車。S9的前排設(shè)計(jì)類似智界S7,橢圓方向盤有點(diǎn)突兀;后排則配備零重力座椅、大扶手及冷暖箱,并提供實(shí)時(shí)對話加密功能以保護(hù)隱私。

享界 S9 | 行政級(jí)轎車
理想加入“端到端”競賽,雖只是PPT

理想汽車發(fā)布了基于端到端模型的全新自動(dòng)駕駛技術(shù)架構(gòu),采用“快系統(tǒng)”和“慢系統(tǒng)”進(jìn)行協(xié)同。與華為、特斯拉等廠商相比,理想方案更為激進(jìn),并在VLM視覺語言模型上實(shí)現(xiàn)了邏輯思考能力。該方案已完成原型驗(yàn)證和實(shí)車部署,但還需解決安全問題。此舉使得理想成為首個(gè)公開端到端技術(shù)方案的車企,在智駕能力上保持競爭力并追趕其他廠商。

端到端 |智能駕駛
銷量第一被華為奪去,理想的智駕能反超嗎?

理想汽車與華為鴻蒙智行成競爭激烈的一對一角逐。上半年銷量,華為超過了理想,但在6月份理想以47774輛超越華為。兩家品牌都押注智駕領(lǐng)域,7月5日,理想發(fā)布了最新智駕路線圖。然而,裁員和投入不足是理想面臨的風(fēng)險(xiǎn)。

理想汽車 | 華為鴻蒙智行
18年賦能,李書福看中了LEVC什么

吉利旗下品牌LEVC推出首款MPV車型L380,售價(jià)37.99-47.99萬元。該車基于新戰(zhàn)略打造,以空間“多變”為核心競爭力,并配備了提升操控、豪華和互聯(lián)等方面的多項(xiàng)配置。翼真L380提供6座、8座版本,未來還將推出更多場景化定制車型。

LEVC | 翼真汽車
二維碼 回到頂部