6月12日晚，著名開源大模型平臺(tái)Stability AI正式開源了，文生圖片模型Stable Diffusion 3 Medium（以下簡(jiǎn)稱“SD3-M”）權(quán)重。

?SD3-M有20億參數(shù)，平均生成圖片時(shí)間在2—10秒左右推理效率非常高，同時(shí)對(duì)硬件的需求比同類型也低，這是一款適合PC、手機(jī)、平板的大模型。

此外，SD3-M還與英偉達(dá)、AMD合作，特地針對(duì)RTX GPU 、TensorRT和最新CPU、MI-300X進(jìn)行了優(yōu)化，性能最高可提升50%。

開源地址：https://huggingface.co/stabilityai/stable-diffusion-3-medium

免費(fèi)在線試用：https://huggingface.co/spaces/stabilityai/stable-diffusion-3-medium

根據(jù)Stability AI的介紹，SD3-M使用的是多模態(tài)擴(kuò)散變換器 (MMDiT)架構(gòu)，生成的圖片質(zhì)量、排版、復(fù)雜文本提示/語(yǔ)義理解和資源效率方面的性能得到了極大提高。

訓(xùn)練數(shù)據(jù)集方面，SD3-M使用了包含10億張圖片的公開和合成數(shù)據(jù)進(jìn)行了預(yù)訓(xùn)練，同時(shí)針對(duì)特定藝術(shù)風(fēng)格和領(lǐng)域，使用了3000萬(wàn)張圖片進(jìn)行了微調(diào)以及300萬(wàn)張偏好圖片。

所以，SD3-M對(duì)用戶的文本提示理解和嵌入圖片文字的效果將比前兩代更好。根據(jù)在線demo，為大家展示一下SD3-M的生成效果。

高聳的摩天大樓、飛馳的汽車和充滿活力的全息廣告構(gòu)成的未來(lái)主義城市景觀

日落時(shí)寧?kù)o的海灘景色，金色的沙灘，溫柔的海浪，一對(duì)夫婦手牽手散步

郁郁蔥蔥的熱帶雨林，茂密的樹葉，五顏六色的鳥類，背景是瀑布。

一家20世紀(jì)50年代的老式餐廳，配有棋盤地板、紅色乙烯基展位和播放經(jīng)典搖滾樂的自動(dòng)點(diǎn)唱機(jī)。

一個(gè)異想天開的幻想世界，漂浮的島嶼，雄偉的龍?jiān)谔炜罩酗w翔，下面是迷人的森林。

一個(gè)時(shí)尚現(xiàn)代的廚房，配有不銹鋼器具、大理石臺(tái)面和一扇俯瞰花園的大窗戶。

以上只是部分案例，有興趣的小伙伴可以通過在線demo免費(fèi)無(wú)限生成。目前SD3-M只能用于學(xué)術(shù)研究無(wú)法商業(yè)化。如果想商用需要聯(lián)系Stability AI進(jìn)行商業(yè)授權(quán)。

本文素材來(lái)源SD3-M官網(wǎng)，如有侵權(quán)請(qǐng)聯(lián)系刪除

END