3月19日,英偉達在 GTC 2019 上展示了最新的深度學習模型——GauGAN,其運用了生成對抗網路 (GAN),能夠將一幅塗鴉變為以假亂真的風景圖。根據影片演示,工作人員在軟體左邊的繪圖區勾勒了數筆,右邊就幾乎實時生成了與之對應的畫面,效果十分驚豔。這項研究成果能讓設計師快速創作藝術構想,也能讓普通人體驗到繪畫的樂趣。
GauGAN 提供了三種繪圖工具:油漆桶、畫筆、鉛筆。下方是各種素材,選擇一種作圖,軟體就會生成對應的影象。這並不是簡單的用材質填充,而是會根據輸入的形狀產生獨特的結果。比如選擇雲朵素材畫一個圓,就會生成一朵輕飄飄的夏日浮雲。選擇樹木素材畫一條直線,會生成一根樹幹,再在上面畫一個圓,就會生成樹枝和樹葉,成為一顆完整的樹。軟體還引入了隨機數機制,避免相同的輸入總是生成相同的結果。
GauGAN 使用的神經網路經過數百萬張照片的訓練,能夠理解畫面中的各項元素,從而能將塗鴉中的圖形用自然的真實事物填入。從演示中可以看到,GauGAN 甚至能正確地生成景物的倒影。GauGAN 還能考慮事物的相關性,若把草地改成雪地,之前畫的樹木就會從枝繁葉茂變得枯萎。
為了能夠實時生成結果,GauGAN 必須執行在張量計算平臺上。在這次展示中,Nvidia 使用了 RTX Titan GPU,保證了實時計算所需的算力。應用深度學習研究組副主席 Bryan Catanzaro 表示,經過一些修改,GauGAN 也可執行在幾乎任何平臺上,只不過需要花上幾秒鐘才能顯示結果。
3月19日,英偉達在 GTC 2019 上展示了最新的深度學習模型——GauGAN,其運用了生成對抗網路 (GAN),能夠將一幅塗鴉變為以假亂真的風景圖。根據影片演示,工作人員在軟體左邊的繪圖區勾勒了數筆,右邊就幾乎實時生成了與之對應的畫面,效果十分驚豔。這項研究成果能讓設計師快速創作藝術構想,也能讓普通人體驗到繪畫的樂趣。
GauGAN 提供了三種繪圖工具:油漆桶、畫筆、鉛筆。下方是各種素材,選擇一種作圖,軟體就會生成對應的影象。這並不是簡單的用材質填充,而是會根據輸入的形狀產生獨特的結果。比如選擇雲朵素材畫一個圓,就會生成一朵輕飄飄的夏日浮雲。選擇樹木素材畫一條直線,會生成一根樹幹,再在上面畫一個圓,就會生成樹枝和樹葉,成為一顆完整的樹。軟體還引入了隨機數機制,避免相同的輸入總是生成相同的結果。
GauGAN 使用的神經網路經過數百萬張照片的訓練,能夠理解畫面中的各項元素,從而能將塗鴉中的圖形用自然的真實事物填入。從演示中可以看到,GauGAN 甚至能正確地生成景物的倒影。GauGAN 還能考慮事物的相關性,若把草地改成雪地,之前畫的樹木就會從枝繁葉茂變得枯萎。
為了能夠實時生成結果,GauGAN 必須執行在張量計算平臺上。在這次展示中,Nvidia 使用了 RTX Titan GPU,保證了實時計算所需的算力。應用深度學習研究組副主席 Bryan Catanzaro 表示,經過一些修改,GauGAN 也可執行在幾乎任何平臺上,只不過需要花上幾秒鐘才能顯示結果。