在3月18日開(kāi)幕的NVIDIAGPU技術(shù)會(huì)議(GTC)上，NVIDIA公布了其最新的圖像處理研究成果—GauGAN，一種基于生成的對(duì)抗性網(wǎng)絡(luò)技術(shù)，能夠?qū)⒎指畹牡貓D轉(zhuǎn)換成真實(shí)的照片。

就算你是一位毫無(wú)繪畫(huà)基礎(chǔ)的新手，“GauGAN”也可以將你的簡(jiǎn)單涂鴉同步成精美風(fēng)景照片。

“GauGAN”收集了超過(guò)100萬(wàn)張圖片作為數(shù)據(jù)基礎(chǔ)，使用深度算法讓AI進(jìn)行學(xué)習(xí)，最終能夠在像素級(jí)的精度上分析圖像，分割，并生成新的圖片。“GauGAN”還擁有大量的選項(xiàng)，可以調(diào)整場(chǎng)景，元素構(gòu)成，甚至還可以根據(jù)這些內(nèi)容調(diào)整光照。

GauGAN并非簡(jiǎn)單的更換形狀和外觀，而是使用巖石、山脈、天空或者水等圖像根據(jù)用戶的區(qū)域輪廓進(jìn)行填充。除了考慮繪圖的原始形狀之外，GauGAN還考慮了場(chǎng)景中的其他物體，例如將一片草地變成一片池塘，那么就會(huì)在水體的周?chē)砻娈a(chǎn)生光線反射。

那么這項(xiàng)技術(shù)是怎樣實(shí)現(xiàn)的呢？NVIDIA的研究專家部署了生成對(duì)抗網(wǎng)絡(luò)，也就是GauGAN中的“GAN”。生成網(wǎng)絡(luò)在創(chuàng)建圖像之后，會(huì)交給鑒別網(wǎng)絡(luò)進(jìn)行審查。鑒別網(wǎng)絡(luò)會(huì)根據(jù)現(xiàn)實(shí)生活中的真實(shí)拍攝照片進(jìn)行學(xué)習(xí)，并一個(gè)像素一個(gè)像素的進(jìn)行引導(dǎo)。

GauGAN這項(xiàng)技術(shù)的應(yīng)用場(chǎng)景也非常明顯，就是給建筑師、城市規(guī)劃者到景觀設(shè)計(jì)師和游戲開(kāi)發(fā)商提供一個(gè)強(qiáng)大的工具來(lái)創(chuàng)建虛擬世界。有了GauGAN，這些專業(yè)人員就能更好地設(shè)計(jì)出想要的原型，并快速改變它們。

NVIDIA應(yīng)用深度學(xué)習(xí)研究院副總裁BryanCatanzaro 說(shuō)：「用簡(jiǎn)單的草圖進(jìn)行頭腦風(fēng)暴設(shè)計(jì)要容易得多，而且這項(xiàng)技術(shù)能夠?qū)⒉輬D轉(zhuǎn)換成高度逼真的圖像。」

當(dāng)然這項(xiàng)技術(shù)對(duì)于我們普通人來(lái)說(shuō)也非常有趣，對(duì)于我們這種完全沒(méi)有繪畫(huà)基礎(chǔ)的人來(lái)說(shuō)，GauGAN只需要簡(jiǎn)單的勾勒出大致倫敦，并使用油漆桶工具對(duì)區(qū)塊進(jìn)行著色，并選擇“瀑布”、“雪景”、“群山”等場(chǎng)景，就能輕松獲得一張非常逼真的風(fēng)景照片。這樣想想是不是還挺有趣的？