文|學術(shù)頭條

清宮題材一直是電視劇行業(yè)的寵兒，近年來出現(xiàn)了《甄嬛傳》 《如懿傳》 《延禧攻略》等諸多熱門單品。

拋開故事本身，電視劇中嬪妃們的美貌給觀眾們留下了深刻印象，讓一大波觀眾高呼也想體驗坐擁“后宮佳麗三千”的“渣渣龍”的快樂。

而另一波吃瓜群眾卻陷入了沉思，歷史上清朝后宮中各位嬪妃真的是如此美貌嗎？留存下來的畫像或許能告訴我們，她們究竟有多美。

心動不如行動，近日 B 站 UP 主 Jack-Cui 就利用 AI 技術(shù)還原了乾隆及其五位嬪妃的樣貌，并對比了《延禧攻略》的劇照作參考。很多人期待的 “白月光” 富察容音、“硬核少女” 瓔珞姑娘都在其中。原圖畫像來自清代宮廷畫師郎世寧的《心寫治平》。

接下來，就帶大家看看畫像上的乾隆和嬪妃們 “動” 起來是什么樣的。

動起來的乾隆和他的嬪妃們

（嬪妃排名不分先后，“渣渣龍”必須放在首位。講道理，每個人都好美?。。。?/p>

乾隆

純惠皇貴妃

孝賢純皇后

淑嘉皇貴妃

孝儀純皇后

清高宗舒妃

掌握這三種 AI 技術(shù)，你也可以

據(jù)了解，此次制作的靈感來源于海外大神 Denis Shiryaev 的 AI stuff 教程，Jack-Cui 在其基礎(chǔ)上經(jīng)過多次試驗修改后實現(xiàn)了照片復原并動起來的效果。該效果用到的深度學習算法分別為：StyleGAN 2、DAIN 、First Order Model。

StyleGAN 算法由 NVIDIA 開發(fā)，可以生成逼真的、但不存在與這個世界的人物肖像，也就是利用 AI 產(chǎn)生虛假視覺效果的能力。

此前，一名 Uber 工程師利用這個算法開發(fā)了一個人物肖像隨機生成網(wǎng)站（奉上網(wǎng)址：），每次刷新這個網(wǎng)站，就會從頭開始生成新的人臉圖像。你可以在這個網(wǎng)站中找到各種各樣、現(xiàn)實不存在的臉，比如網(wǎng)紅臉、黃種人臉、混血人臉等。

此外，還可以利用這種技術(shù)生成新字體，制造二次元老婆，當然用它來吸電子貓的也大有人在。

在默認情況下，SyleGAN 訓練一張 1024×1024 分辨率的圖片，需要使用 8 塊 GPU 訓練接近一個星期的時間，研究人員在說明文檔中告知所有使用者：使用較少 GPU 可能無法達到最佳效果。他們還列出了使用 NVIDIA Tesla V100 GPU 對不同分辨率的圖像進行訓練所需的時間以供參考。

StyleGAN 2 在原版的基礎(chǔ)上進行了升級，重點修復 artifacts 問題，并進一步提高了生成圖像的質(zhì)量。

另一個算法 DAIN（Depth-Aware video frame Interpolation，插幀算法）則由上海交大的團隊開發(fā)，比之前 NVIDIA 的算法效果更清晰、幀率更高，可以把 30fps 進一步插幀到 480fps，這已經(jīng)超過了很多手機的慢動作錄像幀率。

通過這個算法完成的視頻，即使將視頻慢放 8 倍也不會覺得卡頓，大大提高了視頻的流暢度。

而 First Order Motion 模型來自 NeurIPS 2019 論文 “First Order Motion Model for Image Animation”，最初的目的是讓 “靜態(tài)圖片” 動起來。經(jīng)過一段時間的發(fā)展，它甚至可以讓照片里的人物復活，為你演唱一首歌曲。

根據(jù)作者介紹，這個模型可以輕易地讓 “權(quán)游” 中的人物模仿特朗普進行講話，還可以讓靜態(tài)的馬跑起來，另外還可以完成模特的 “一鍵換裝”。

前一陣火爆全網(wǎng)的特朗普和蒙拉麗莎唱《Unravel》就是利用了這個技術(shù)（配樂請自行腦補）。

技術(shù)從來都是一把雙刃劍，AI 也不例外。在 AI 的整個發(fā)展歷程中，我們發(fā)現(xiàn) AI 掌握了越來越多不斷超出我們想象的新 “技能”，一方面為我們的生活和工作帶來了諸多便利和樂趣，另一方面也帶來了很大的安全隱患，為不法分子帶來了可乘之機。技術(shù)本身是中性的，是好是壞取決于使用它的人，我們希望它可以被正確、合理地被利用。

附上UP 主 Github 開源項目地址：

參考資料：

;utm_campaign=repo