首頁 > 科技

英偉達「神筆馬良」GauGAN釋出Windows應用程式,可匯出PSD檔案

2021-06-28 16:35:39

豐色 發自 凹非寺量子位 報道 | 公眾號 QbitAI

大家還記得致敬印象派大師高更的GauGAN嗎?

只需簡單畫幾筆,就能生成逼真風景畫的那個:

圖片

這個能讓普通人秒變「神筆馬良」的神器,現在又釋出Windows版公測程式啦!

圖片

長這樣:

圖片

這次它提供了PSD檔案儲存格式等功能,介面也是看著此前的網頁版友好非常多:

圖片

雖然但是……新的桌面版只能支援英偉達RTX系列的GPU了!

圖片

有RTX系列的朋友可以往下看了。

如何使用?

下載安裝包之前確保你的電腦符合以下具體要求:

作業系統:Windows 10GPU:GeForce RTX, NVIDIA RTX, Quadro RTX, TITAN RTX顯示卡驅動:460.89或更高版本

眾所周知,它與其他畫畫工具最大的區別就是:讓創作者用材料而不是顏色來作畫

目前程式一共提供了15種不同的材料,包括天空、山脈、河流石頭等:

圖片

並提供9種風格, 用來修改作品的整體濾鏡:

圖片

這和老版沒啥區別。

筆刷、直線、油漆桶、取色器等可以調節粗細的工具都有,就不說了。

和PS很像,筆畫會按不同材料被分別存成一個個圖層,而桌面版這次幫你顯示出來了。

圖片

另外,它是實時渲染,左邊畫著右邊就出結果,不像網頁版還需要左等右等。

並且無論你在哪邊畫,兩邊都可以互動式更新(這個功能也可關閉)。

圖片

最後,除了PNG格式,桌面版還可匯出PSD檔案。

並且左邊(segmentation map)的影象也可以儲存(雖然小編想不到這個存了有啥用,為了下次匯入接著畫嗎)。

而存成PSD格式的話,最終輸出影象會被存為背景圖層,接著就可以拿到PS上繼續創作、或者與其他藝術作品結合了。

ps.也可匯入從該程式匯出的PSD檔案。

下面是更多作品示例:

圖片
圖片

背後的技術

英偉達去年三月首次公佈了這個工具背後的技術GauGAN,這一路又是上線網頁版和又是開發桌面端,不得不令人想象它的應用前景。wangGauGAN這個模型也是將語義分割圖轉化為逼真影象,它最大的創新點是提出了空間適應標準化(SPADE)。

圖片

SPADE演算法作用在生成器中,它會接收上一層的輸出和語義圖作為輸入,而上一層的輸出經過BN,語義圖經過resize後通過一個卷積層,然後再將它通過兩個卷積層後生成的結果分別和BN的做wise乘法和加法得到輸出影象。

圖片

這種處理方式能夠有效地彌補BN帶來的語義資訊的丟失,使得生成的影象能夠更加逼真。

圖片

這樣語義訊號就可以作用於所有層的輸出,然後再進行一下上取樣調整就可以交給判別器了。

另外,為了讓最終輸出更加逼真,該模型在NVIDIA DGX系統上使用了超過500萬張影象進行訓練。

最後,有條件有興趣的朋友可以腦洞大開,戳下方連結去嘗試。

也不知道這認真的桌面版一出,會不會有人做出令人驚喜的應用來呢。


IT145.com E-mail:sddin#qq.com