現(xiàn)在，你只要有一臺(tái)電腦，輸入一段文字，就能生成一張高清的AI海報(bào)，無(wú)需任何平面設(shè)計(jì)的技巧。甚至有人借助AI的作品，贏得了索尼攝影獎(jiǎng)和藝術(shù)比賽大獎(jiǎng)。

這一切，都得益于Stable Diffusion團(tuán)隊(duì)的創(chuàng)新和開源。他們近日發(fā)布了最新AI繪畫模型——DeepFloyd IF，一個(gè)強(qiáng)大的文本到圖像的繪畫模型，可以智能地將文字融入到圖片中，實(shí)現(xiàn)像素級(jí)的圖像生成。

DeepFloyd IF和之前的模型比又有哪些進(jìn)步呢？

首先，它可以準(zhǔn)確繪制文字，這是之前的AI繪畫模型很難做到的。比如你想讓它畫一個(gè)霓虹燈招牌上寫著“歡迎光臨”，它就能把文字以合適的字體、風(fēng)格、排版放在招牌上，而不是像之前的模型那樣畫出一些亂七八糟的符號(hào)。

其次，它可以準(zhǔn)確理解空間關(guān)系，也就是說(shuō)它能夠根據(jù)文字描述中的方位、距離、大小等信息，把圖像中的物體放在合理的位置，而不是像之前的模型那樣畫出一些不符合邏輯的場(chǎng)景。比如你想讓它畫一個(gè)“一只貓照鏡子看見(jiàn)獅子的倒影”，它就能把貓和鏡子放在前面，獅子的倒影放在后面，而不是把獅子放在鏡子里面或者把貓和獅子混在一起。

除了這兩個(gè)突出的優(yōu)勢(shì)，DeepFloyd IF還有其他一些亮點(diǎn)。比如它是基于像素級(jí)擴(kuò)散模型的，也就是說(shuō)它是直接在像素層面上生成圖像的，而不是像之前的模型那樣先生成一個(gè)低分辨率的圖像編碼，再通過(guò)超分辨率模型放大。

這樣做的好處是可以提高圖像質(zhì)量和多樣性，避免出現(xiàn)模糊或重復(fù)的圖像。比如它可以生成64×64分辨率的小圖，再經(jīng)過(guò)不同層次的擴(kuò)散模型和超分辨率模型放大到1024×1024分辨率。

另外，它還可以實(shí)現(xiàn)以圖生圖和調(diào)整風(fēng)格、內(nèi)容和細(xì)節(jié)的功能，也就是說(shuō)你可以給它一個(gè)已有的圖像，再給它一些新的提示詞，讓它在原圖基礎(chǔ)上進(jìn)行修改或變換。比如你可以給它一個(gè)風(fēng)景畫，再給它一個(gè)提示詞“雪”，讓它把風(fēng)景畫變成冬天的樣子。不像以前一樣還需要對(duì)模型做微調(diào)就可直接實(shí)現(xiàn)。

如此驚人的Stable Diffusion模型究竟迭代了多久？

其實(shí)，這個(gè)團(tuán)隊(duì)在2021年底才開源了第一個(gè)Stable Diffusion模型。這個(gè)模型基于擴(kuò)散模型和OpenAI的CLIP模型，能夠根據(jù)文本提示生成高質(zhì)量的圖像，而且還能實(shí)現(xiàn)圖像到圖像的轉(zhuǎn)換，比如把一張照片變成油畫或漫畫風(fēng)格。

在2022年初推出了Stable Diffusion 2.0版本，進(jìn)一步提升了模型的性能和功能。這個(gè)版本使用了谷歌的T5-XXL模型作為文本編碼器，替代了之前的OpenCLIP，從而更準(zhǔn)確地理解文本含義。

同時(shí)，這個(gè)版本還引入了像素級(jí)擴(kuò)散模型，直接在像素層面進(jìn)行擴(kuò)散過(guò)程，提高了圖像的分辨率和質(zhì)量。此外，這個(gè)版本還增加了超分辨率放大器模型和深度到圖像模型，分別可以實(shí)現(xiàn)圖像的放大和深度引導(dǎo)的圖像生成。

直到2023年4月，他們又迎來(lái)了重大突破，他們發(fā)布了全新的繪畫模型DeepFloyd IF，不僅能夠生成照片級(jí)的圖像質(zhì)量，還能夠解決之前模型難以實(shí)現(xiàn)的兩大難題：準(zhǔn)確繪制文字和準(zhǔn)確理解空間關(guān)系。這意味著，AI已經(jīng)完全可以取代大量原畫師和平面設(shè)計(jì)等崗位?；蛘哒f(shuō)，取代早就已經(jīng)開始了。

結(jié)語(yǔ)

現(xiàn)在AI的發(fā)展幾乎是日新月異，各種人工智能的模型迭代速度甚至以月來(lái)計(jì)算，每次迭代都有加大的智能提升。面對(duì)發(fā)展迅速的AI，我們不禁要思考，人類的未來(lái)會(huì)不會(huì)被AI取代？畢竟，AI不僅能夠繪畫，還能夠?qū)懽?、作曲、編程、翻譯、聊天……幾乎沒(méi)有什么是AI做不到的。我們還能依靠什么來(lái)保持自己的優(yōu)勢(shì)和價(jià)值呢？