僅用18天,英偉達新型GAN合成真假難辨高清明星臉,gan真假難辨
安妮 編譯整理
量子位 出品 | 公眾號 QbitAI
考眼力:你能分出下面哪張圖是電腦合成的嗎?
是這位神似年輕時萊昂納多的神秘男子——
還是這位捲髮碧瞳女士——
難以分辨。
但事實是,上面兩張均為合成映像,驚不驚喜,意不意外?
這些映像來自英偉達與阿爾託大學的高清人臉合成項目,項目中提出的新型GAN,能合成出1024×1024像素的高清映像。
這不是英偉達最近唯一在合成高清映像研究中的嘗試。就在上月,還與伯克利大學提出能將語義標註映像還原成現實世界樣子的pix2pixHD,映像清晰度可達2048*1024,甩CRN、pix2pix等其他映像合成工具好幾條街。
這個新型GAN的不僅“配方”與pix2pixHD不太一樣,更有意思的是,還多了幾分明星臉的味道。
△ 產生映像視頻
“明星臉”項目
近日,駐紮在芬蘭的英偉達研究小隊正試圖構建一個系統,它能通過分析上千張明星的快照,識別常見的模式,並創造出看起來相似的新映像。這個系統也能合成馬、公交、單車、植物等除人類以外的常見物體映像。
△ 合成映像
通過分析明星臉構建的系統,產生的映像也和明星臉有幾分神似。比如上面這張,有些人會覺得和美劇《老友記》裡“瑞秋”的扮演者珍妮弗·安妮斯頓相似,又有些人覺得像美國歌手Selena Gomez。
4×4→1024×1024
“電腦通過和自己玩貓捉老鼠的遊戲產生了這些映像。”研究人員Jaakko Lehtinen說。
研究人員提出了一種新型GAN訓練方法,使產生器和辨別器逐步發展。在開始時,產生器(G)和辨別器(D)均為4×4的低解析度。隨著不斷訓練,研究人員會逐漸為產生器和辨別器增加新的層,這樣就增加了產生映像的空間解析度,因此產生的映像越來越精細。
4×4像素的低清圖是如何一步步變高清的?這有一張隨訓練時間變化的產生圖。
展示了英偉達系統在18天內產生映像的變化。經過千萬次迭代後,GAN最終產生1024×1024像素的令人信服的清晰映像。研究人員表示這種新方法加快了訓練速度,並且穩定了映像品質。
研究人員希望這項技術能夠指導軟體在短時間內合成出接近真實的映像。“我們還能更進一步,不僅可以用它來產生照片,還能應用在電腦遊戲和電影中。”Lehtinen表示。
相關資料
目前,相關研究的論文Progressive Growing of GANs for Improved Quality, Stability, and Variation已向ICLR 2018投稿。
項目地址:
https://github.com/tkarras/progressive_growing_of_gans
論文地址:
http://arxiv.org/abs/1710.10196
— 完 —
加入社群
量子位AI社群13群開始招募啦,歡迎對AI感興趣的同學,加小助手qbitbot5入群;
此外,量子位專業細分群(自動駕駛、CV、NLP、機器學習等)正在招募,面向正在從事相關領域的工程師及研究人員。
進群請加小助手號qbitbot5,並務必備忘相應群的關鍵詞~通過審核後我們將邀請進群。(專業群審核較嚴,敬請諒解)
誠摯招聘
量子位正在招募編輯/記者,工作地點在北京中關村。期待有才氣、有熱情的同學加入我們!相關細節,請在量子位公眾號(QbitAI)對話介面,回複“招聘”兩個字。
量子位 QbitAI · 頭條號簽約作者
վ'ᴗ' ի 追蹤AI技術和產品新動態