太平洋科技要聞

Llama 4最新消息來了！黃仁勛、扎克伯格對談一文濃縮，揭開Meta布局AI野望

硅兔賽跑整合編輯：太平洋科技發(fā)布于：2024-07-31 16:10

公司市值達到千億市值、重構(gòu)人們社交網(wǎng)絡(luò)以及大學(xué)輟學(xué)生。

在今天的計算機圖形會議SIGGRAPH上，英偉達創(chuàng)始人兼首席執(zhí)行官黃仁勛用三個關(guān)鍵句介紹了剛40歲的Meta創(chuàng)始人兼CEO馬克·扎克伯格。

這也是扎克伯格第一次親臨SIGGRAPH現(xiàn)場，受黃仁勛邀請作為爐邊談話的嘉賓出席。兩人不但在會上分享了不少私交趣事，會上小扎還和黃仁勛互換了皮夾克。

事實上，Meta一向與英偉達的關(guān)系緊密，其剛發(fā)布的Llama 3.1 405B模型采用了16000個H100 GPU進行訓(xùn)練。今年一月，扎克伯格在社交媒體上透露，計劃今年年底前向英偉達購買35萬個H100 GPU芯片。如此一來，Meta的GPU數(shù)量將達到60萬，毫無疑問，Meta是英偉達當(dāng)下最重要的客戶之一。

不僅如此，英偉達也是Meta的重要客戶之一。訪談中，黃仁勛介紹到英偉達內(nèi)部正在使用Llama 3.1 405B達大模型，并為其優(yōu)化�！癓lama 2的發(fā)布是去年AI領(lǐng)域最大的事件。它激活了各行各業(yè)。”他還說道。而Llama 2采用的正是英偉達的A100 GPU芯片。

此外，英偉達和Meta同樣在元宇宙領(lǐng)域關(guān)系緊密，這是目前為數(shù)不多仍在堅定投資元宇宙方向的兩大北美科技巨頭。黃仁勛談及智能眼鏡正好趕上了生成式AI的熱潮，并提及Ray-Ban智能眼鏡將AI引入虛擬世界的愿景，與英偉達將AI大模型引入Omniverse的想法不謀而合。

兩大北美科技巨頭的靈魂人物齊聚一堂，他們正在密切關(guān)注哪些AI突破？又在交流中透露出哪些最新信息？我們梳理了此次爐邊談話中四大關(guān)鍵信息，一文看穿Meta想要成為生成式AI領(lǐng)頭者的愿景與野心。

AI正在重塑推薦方式，Meta想用單一模型“統(tǒng)一”多系統(tǒng)

“所有和生成式AI有關(guān)的東西，都是有趣的革命�！痹瞬裾f道。他提到，目前Meta旗下的社交全家桶已經(jīng)在生成式AI的影響下發(fā)生不小的變化，像是Instagram、Facebook上的推薦系統(tǒng)，正在被AI重塑。

扎克伯格：“過去20年社交媒體的核心內(nèi)容正在不斷演變，今天也是�！�

他認(rèn)為過去的推薦系統(tǒng)，是推薦來自不同領(lǐng)域的公共內(nèi)容，并不重視推薦內(nèi)容的排序。但如今，在生成式AI的影響下，社交媒體的推薦系統(tǒng)不但會幫助你關(guān)注最新的朋友進展，還會幫助你關(guān)注一些重要事情的發(fā)生。

現(xiàn)階段，你在Instagram上看到的大部分內(nèi)容會是，世界各地和你興趣相同的人正在關(guān)注的信息。除此之外，創(chuàng)作者還可以通過AI工具，隨時創(chuàng)造新的內(nèi)容，或者將不同的現(xiàn)有內(nèi)容快速整合在一起。

黃仁勛認(rèn)為推薦系統(tǒng)是世界上最大的計算系統(tǒng)之一。

大，也就意味著其內(nèi)部數(shù)據(jù)非常復(fù)雜。扎克伯格認(rèn)為推薦系統(tǒng)像是Transformer架構(gòu)一樣，要建立越來越多通用模型，將一些非結(jié)構(gòu)的數(shù)據(jù)嵌入其中，而不是用不同的模型去處理不同類型的內(nèi)容。

扎克伯格舉了個例子，Meta內(nèi)部會有一個模型來做短視頻的排名和推薦，而另一個模型來做長視頻的排名和推薦。然后通過一些處理，讓推薦系統(tǒng)既可以推薦短視頻，也可以推薦長視頻。如果能夠建立更通用的AI模型，推薦系統(tǒng)的推送內(nèi)容則會更加精準(zhǔn)。

“我有一個夢想是，Instagram、Facebook都用一個AI大模型，但該模型包含了不同類型的內(nèi)容和系統(tǒng)，且在不同的時間里會有不同的目的。”他說道：“比如說早上是推薦你今天想看的有趣內(nèi)容，但是下午則是幫助你建立你的社交網(wǎng)絡(luò)�！�

Meta推出AI studio，人人皆可創(chuàng)作AI分身

生成式AI正在重塑人們的工作流程和產(chǎn)品的重大升級進程。扎克伯格希望從打造一個AI助手，能夠幫助我們完成不同類型的任務(wù)，且會提出一些創(chuàng)造性的想法�！八鼈兛梢曰卮鹑魏螁栴}�！�

他還透露道Llama 3以及Llama 4的升級方向。“AI不再像是一個聊天機器人，僅會回應(yīng)用戶的問題，而是用戶給AI一個意圖，AI可以給你擬出該想法在不同框架中執(zhí)行出來的結(jié)果會是什么樣的。這些任務(wù)如果要一一實現(xiàn)，那么用戶可能是幾周到幾個月后才能拿到結(jié)果。”

“這有點像搭建決策樹，有的時候我們做決定并非僅思考單點問題�！秉S仁勛總結(jié)道。隨后，他又提及Meta的創(chuàng)作者AI愿景。

Meta剛剛推出AI studio平臺，為每個AI創(chuàng)作者提供豐富的“工具箱”，幫助其打造自己的AI助手，或者為企業(yè)打造互動式的Agent�！澳憧梢园涯銊�(chuàng)作的Agent訓(xùn)練成為你，從而代替你和多方進行互動。這幾乎像是一件藝術(shù)品�！痹瞬裾f。

他還提到如今的AI Agent還可以幫助用戶提高自己的社交能力。比如說，“我向經(jīng)理提加薪”、“我和女朋友吵架了，怎么辦？”通過這些模擬提問，用戶可以預(yù)測對話的走向，并提前準(zhǔn)備。

多樣化的創(chuàng)作也會帶來更多的趣味性�！叭藗儾幌牒屯粋€Agent進行互動，不管是Meta AI還是ChatGPT，人們只想和自己的Agent互動。這也是AI Studio發(fā)展的方向�！彼治龅馈�

他覺得未來每個企業(yè)都會有自己的AI Agent，就像現(xiàn)在的郵箱、社交賬號一樣。他還透露Meta的AI Studio商業(yè)版將會有更多的服務(wù)支持。

Meta因開源省幾十億美元，正搭建開放AR/VR系統(tǒng)

Meta同樣是目前為數(shù)不多，堅持開源的科技巨頭。Meta不但開源了AI框架PyTorch，而且還開源了Llama 3.1和Llama大模型。

當(dāng)被問及Meta的開源哲學(xué)，扎克伯格坦白一部分原因是因為Meta在其他科技公司之后才搭建分布式計算基礎(chǔ)設(shè)施和數(shù)據(jù)中心，失去了一定程度的競爭優(yōu)勢。因此，他們希望通過開源的方式從生態(tài)系統(tǒng)中獲益。

通過公布服務(wù)器設(shè)計、網(wǎng)絡(luò)設(shè)計和數(shù)據(jù)中心設(shè)計，供應(yīng)鏈圍繞這些基礎(chǔ)設(shè)施搭建起相關(guān)體系，Meta也節(jié)省了數(shù)十億美元。其中英偉達正是通過Meta的開放計算，設(shè)計了Nvidia HGX。

扎克伯格分析認(rèn)為，在過去幾十年互聯(lián)網(wǎng)的變革中，封閉生態(tài)與開放生態(tài)分別統(tǒng)治了不同時期。網(wǎng)站時代，開放生態(tài)獲勝。移動時代，以蘋果為代表的封閉生態(tài)獲勝。PC時代，則是以微軟Windows生態(tài)為代表的封閉生態(tài)獲勝�！拔蚁Ｍ谙乱淮嬎阒校_放生態(tài)將會再次成為領(lǐng)先者�！�他透露如今Meta正在通過Llama AI 在AR和VR設(shè)備中搭建一個開放操作系統(tǒng)。

當(dāng)然，他也解釋道Meta開源并非是利他主義，而是因為只有開源才能讓自己構(gòu)建的東西更好。

會上，Meta還推出了Segment Anything Model 2 （SAM 2）。這是Meta Segment Anything Model的最新產(chǎn)品，也是第一個可實時提示將視頻和圖像進行分割的通用模型。Meta同樣開放了SA-V數(shù)據(jù)集，其中包括大約 51000 個真實世界視頻和超過 600,000 個masklet。

官網(wǎng)介紹：https://ai.meta.com/blog/segment-anything-2/

體驗鏈接：https://sam2.metademolab.com/

黃仁勛也對此補充道，英偉達正是通過Meta的開源數(shù)據(jù)，打造了AI Foundry，幫助企業(yè)將AI數(shù)據(jù)存在任何地方，并設(shè)立好安全信息防護。如今，英偉達正在通過Llama微調(diào)，打造不同類型的AI，如芯片設(shè)計AI、軟件編碼AI，幫助企業(yè)分類相關(guān)的bug，并發(fā)送給合適的工程師。

“如果你還沒有雇傭AI，馬上去做。”黃仁勛笑道。

押注下一代計算平臺，AI或成突破點

如今，AI在計算機視覺領(lǐng)域的應(yīng)用廣泛。但除了AI識別不同的人與物之外，視頻理解模型與視頻語言模型還能做些什么呢？

扎克伯格對此的回答是：為下一代計算平臺服務(wù)。他認(rèn)為，AR眼鏡將會成為下一代計算平臺的移動版，而MR頭顯將成為工作站和主機。

目前，Meta正在推動構(gòu)建AR眼鏡的相關(guān)產(chǎn)業(yè)發(fā)展，如顯示技術(shù)、芯片等等。Ray-Ban智能眼鏡雖然廣受歡迎，但并不是全息AR眼鏡，Meta計劃未來幾年會推出新的全息眼鏡（剛開始可能價格會很高）。同時，Meta還在打造一些時尚好看的智能眼鏡。扎克伯格希望在這些外觀時尚的眼鏡中塞入更多的功能，像是揚聲器、麥克風(fēng)、耳機等等。

五年前的扎克伯格堅定全息AR眼鏡將會比AI更早到來，但如今，行業(yè)形勢已經(jīng)發(fā)生了轉(zhuǎn)變。他認(rèn)為不具備顯示功能的智能眼鏡將會擁有數(shù)百萬的用戶規(guī)模，而可互動式的AI增強了用戶使用智能眼鏡的趣味性。

黃仁勛暢想到未來他可能有一個Jensen AI，通過智能眼鏡閱讀過自己看過的所有文字，并且可以通過麥克風(fēng)了解自己的回答方式，并訓(xùn)練出自己的語言風(fēng)格。日復(fù)一日的積累下，AI將成為真正的助手和伴侶，并且不帶有任何批判性，甚至你只要給它一個主題，它就能自己起草幾個不同版本的內(nèi)容。

AI與元宇宙兩手抓，Meta重回新生

從2021年宣布公司改名以來，Meta一直飽受爭議，股價更是連連下跌。但生成式AI的爆發(fā)，又讓Meta重新站回北美科技巨頭的隊列中。

如今Ray-Ban智能眼鏡在海外頗受歡迎，Meta官方也透露如今Ray-Ban智能眼鏡的銷售速度比生產(chǎn)速度更快。Ray-Ban智能眼鏡和AI的聯(lián)動，又讓Meta在元宇宙賽道擁有了新的競爭優(yōu)勢。

此次與黃仁勛的對談中，雙方還透露了不少私交甚好的消息，也進一步鞏固了英偉達與Meta合作信息。

Meta在AI賽道和元宇宙賽道的雙重布局，是否能成為它拿到下一個時代的船票？我們也將持續(xù)關(guān)注。

本文來源：硅兔賽跑

生成式AI 元宇宙智能眼鏡

硅兔賽跑

原創(chuàng)欄目