首頁(yè) > 科技要聞 > 科技> 正文

Stable Diffusion 3 Medium 開源，AI 生圖格局迎來巨變

appso 整合編輯：太平洋科技 發(fā)布于：2024-06-13 17:30

就在剛剛，Stable Diffusion 3 Medium 如約而至。

幾天前，Stability AI 在社交平臺(tái) X 上官宣，SD3 Medium 將在 6 月 12 日正式開源。

這一次，沒有跳票，它是真的來了。

20 億參數(shù)大小，筆記本也能玩轉(zhuǎn) SD3 Medium

據(jù) Stability AI 官方博客介紹，SD3 Medium 模型包含 20 億個(gè)參數(shù)，能夠生成更高質(zhì)量、更細(xì)膩的圖像。

得益于模型較小的尺寸，SD3 Medium 尤其適合在消費(fèi)類 PC 和筆記本電腦以及企業(yè)級(jí) GPU 上運(yùn)行。

SD3 Medium 特點(diǎn)如下：

-克服常見的手部和面部瑕疵，無需復(fù)雜工作流程即可提供高質(zhì)量圖像。

-理解涉及空間關(guān)系、構(gòu)圖元素、動(dòng)作和風(fēng)格的復(fù)雜提示。

-在生成文本方面取得前所未有的成果，無人工痕跡和拼寫錯(cuò)誤。

-低 VRAM 占用，適用于標(biāo)準(zhǔn)消費(fèi)級(jí) GPU，也不會(huì)降低性能。

-能夠從小數(shù)據(jù)集吸收細(xì)微細(xì)節(jié)，使其非常適合定制。

在訓(xùn)練 SD3 Medium 上，Stability AI 花了不少心思。

據(jù)介紹， Stability AI 采用合成數(shù)據(jù)和篩選過的公開數(shù)據(jù)來訓(xùn)練模型。

Stability AI 在 10 億張圖片上進(jìn)行了預(yù)訓(xùn)練。微調(diào)數(shù)據(jù)集包含 3000 萬張針對(duì)特定視覺內(nèi)容和風(fēng)格的高質(zhì)量美學(xué)圖片，以及 300 萬張基于偏好的數(shù)據(jù)圖片。

像所有模型一樣，該模型有時(shí)也會(huì)「三觀不正」，輸出生成一些不準(zhǔn)確、有偏見或有害的內(nèi)容。

為此，Stability AI 對(duì) SD3 Medium 做了很多檢查工作，包括讓專業(yè)團(tuán)隊(duì)（像紅隊(duì)測(cè)試那樣）從內(nèi)外部找問題。

在訓(xùn)練模型時(shí)，Stability AI 給 AI 用的數(shù)據(jù)也都是精心挑選過的。

Stability AI 還特別強(qiáng)調(diào)，所有使用者都得遵守 SD3 Medium 的使用規(guī)則，按照自己產(chǎn)品的要求和規(guī)定來設(shè)置防護(hù)措施，防止傳播不良內(nèi)容。

附上 Hugging Face 項(xiàng)目地址：https://huggingface.co/stabilityai/stable-diffusion-3-medium

AI 生圖迎來史詩(shī)級(jí)進(jìn)化，網(wǎng)友玩瘋了

第一波下載模型的網(wǎng)友已經(jīng)開始玩瘋了。

X 用戶 @recatm 讓 SD3 Medium 生成的骷髏頭，光影效果處理得當(dāng)，明暗對(duì)比也拉滿了。

在他看來，SD3 Medium 還解決了兩大難題，一是色彩過猛、對(duì)比度太狠，以往逼真肖像分分鐘變「辣眼照」的尷尬，二是解決了 jpg 偽影、像素渣和糊一臉的朦朧美等問題。

老人臉上的褶子和衣服的質(zhì)感，細(xì)膩得讓人想伸手去摸一摸，很難讓人相信這居然是 AI 生成的，

冰塊與陽(yáng)光的浪漫邂逅，晶瑩透亮，美得讓人心顫，仿佛每一縷光線都是大自然的調(diào)色盤。

輪廓的鮮明、色彩的巧妙搭配，獅子像素畫在有限的像素中達(dá)到了尚可的表現(xiàn)力。

網(wǎng)友 @toyxyz3 分享的照片更是直觀地展示了 Stable Diffusion 模型的進(jìn)化軌跡，不過，各花入各眼，相比之下，你更喜歡哪個(gè)版本生成的圖片。

Stability AI 官方也在博客中曬出了一些 SD3 Medium 的得意之作。

從樣張中也可以看到，生成的圖片具有極高的逼真度，色彩搭配十分和諧，幾乎可以與真實(shí)拍攝的照片相媲美。

又比如，以前生成圖片文字足以讓人頭大，但點(diǎn)滿文字渲染技能的 SD3 Medium ，也不再輕易「亂碼」了。

開源界的英雄，卻成了最先倒下的明星公司？

從 SDXL、Stable Audio、Stable Video ，再到今天升級(jí)的 SD3 Medium，在過去的一年里，Stability AI 發(fā)布的產(chǎn)品可謂是一波接一波。

但與產(chǎn)品穩(wěn)定的發(fā)布節(jié)奏截然相反的是，這家公司的技術(shù)團(tuán)隊(duì)動(dòng)蕩不斷，高層及技術(shù)人才像走馬燈似地?fù)Q。

全球最大 AI 開源社區(qū) Hugging Face 首席執(zhí)行官曾預(yù)言，2024 年某個(gè)當(dāng)紅的 AI 公司會(huì)破產(chǎn)，或者以極低的價(jià)格被收購(gòu)。

現(xiàn)在，幾乎大部分人都認(rèn)為 Stability AI 最有可能成為這個(gè)應(yīng)驗(yàn)者。

說到這兒，就不能不提一嘴 Stability AI 的前 CEO Emad Mostaque。

Mostaque 的上份職業(yè)是對(duì)沖基金經(jīng)理，大部分時(shí)間在搞石油交易，雖然擁有計(jì)算機(jī)科學(xué)學(xué)位，但之前從未創(chuàng)辦或入職科技公司，還有說大話和搶功勞的毛病。

比如，他在融資時(shí)將亞馬遜稱為「戰(zhàn)略合作伙伴」，其實(shí)兩者只是普通的甲乙方。

他說 Stability 正在為數(shù)十家客戶構(gòu)建定制 AI 模型，但被問到具體的名字時(shí)，只透露了一家印度控股公司和一個(gè)非洲國(guó)家。

更迷的是，明明公司已經(jīng)資金困難，Mostaque 和他曾經(jīng)擔(dān)任公關(guān)主管的妻子，與公司財(cái)務(wù)之間的關(guān)系還不清不楚。

而出走 Stability AI 后，Mostaque 又開始了新的創(chuàng)業(yè)項(xiàng)目，業(yè)務(wù)方向?qū)⒓性谡⻊?wù)、醫(yī)療保健和教育，他介紹道「將大模型想象為一名畢業(yè)生——你仍然需要對(duì)他們進(jìn)行工作培訓(xùn)�！�

高管和人才走得走、散得散，Stability AI 自己能不能穩(wěn)住陣腳，仍是個(gè)未知數(shù)。但今天的主角 SD3 Medium 也用實(shí)際行動(dòng)給外界一個(gè)響亮的回答。

要知道，在這 AI 圈子里，一開始大家都愛聽故事，夢(mèng)想、未來啥的隨便聊，瑕疵也能睜一只眼閉一只眼。

但現(xiàn)在光靠畫大餅可不夠，得拿出真本事，才能讓投資者心甘情愿掏腰包，

Stability AI 依然稱得上開源英雄，但跟 Midjourney 一比，日子過得緊巴巴的，這也是目前開源模型所面臨的窘境。

開源雖美，但公司得先生存，才能談發(fā)展嘛。

本文來源：Appso
appso

網(wǎng)友評(píng)論

聚超值•精選

推薦 手機(jī) 筆記本 影像 硬件 家居 商用 企業(yè) 出行 未來
  • 漢美馳李梟雄：擁抱AI浪潮，智能家居需求暴增勢(shì)不可擋
    漢美馳李梟雄：擁抱AI浪潮，智能家居需求暴增勢(shì)不可擋

    作為美國(guó)百年家電品牌，HamiltonBeach漢美馳在美國(guó)市場(chǎng)處于行業(yè)領(lǐng)導(dǎo)地位，在本屆AWE展會(huì)上，漢美馳與太平洋網(wǎng)絡(luò)合作，展出了他們的三個(gè)主打品類：破壁機(jī)、慢燉鍋和空氣炸鍋，其中，破壁機(jī)屬于攪拌類小家電，漢美馳是這個(gè)品類的開創(chuàng)者；慢燉鍋是美國(guó)家庭的必需品，就像我們中國(guó)家庭的電飯煲一樣，漢美馳慢燉鍋累計(jì)在美國(guó)的銷量超過3000萬臺(tái)，是這個(gè)品類的領(lǐng)導(dǎo)品牌；漢美馳的這款HALO空氣炸鍋剛剛獲得了全球頂級(jí)設(shè)計(jì)大獎(jiǎng)——iF設(shè)計(jì)獎(jiǎng)。 今年，漢美馳在國(guó)內(nèi)市場(chǎng)的動(dòng)作很多，包括：推出了家電行業(yè)第一款應(yīng)用chatGPT的AI牛排機(jī)，全球首發(fā)煙灶產(chǎn)品，全球首發(fā)中式廚電產(chǎn)品，自建抖音、淘寶直播間，與頭部主播烈兒寶貝等合作……這些經(jīng)營(yíng)動(dòng)作的背后，漢美馳有怎樣的戰(zhàn)略規(guī)劃？他們對(duì)中國(guó)市場(chǎng)有些什么樣的判斷？他們的優(yōu)勢(shì)有哪些？請(qǐng)看PConline獨(dú)家專訪漢美馳中國(guó)營(yíng)銷中心總經(jīng)理李梟雄先生。

    呼倫 呼倫 2023-05-05 00:03
    • 二維碼 回到頂部