AI「复活」《延禧攻略》众生相

十三 2020-11-20 14:08:16 来源：量子位

金磊 发自 凹非寺
量子位 报道 | 公众号 QbitAI

一部《延禧攻略》，让清朝古装剧在国内大火了一把。

敢爱敢恨的魏璎珞，贤良淑德的富察皇后，深藏不漏的纯妃……

人物特点各个鲜明，令人印象着实深刻。

但历史中的她们，究竟长什么样呢？

最近，B站一位名为Jack-Cui的Up主便利用AI技术，让乾隆的后宫们从画中「复活」了一把。

话不多说，现在就让我们一同欣赏。

AI神还原《延禧攻略》众生相

据这位Up主介绍，AI在「施法」前所基于的画像，是来自清代宫廷画师郎世宁的《心写治平》。

当然，他对这些画像也是做了一些「数据预处理」，专门挑了一些好看、出名的嫔妃：

有些好像得罪画师的画像，就不复原了……

首先登场的是纯妃。

古代画像、《延禧攻略》中的剧照长这样。

AI修复后的纯妃，是这样的。

比起扁平的画像，AI修复后的人像更具立体感，不仅眼睛可以眨动，脑袋也能左右晃动。

接下来是富察皇后的画像和剧照。

AI较为逼真地还原了画像中皇后的脸型。

而这次，修复后的画像，嘴也能动起来「说话」。

当然，缺不了《延禧攻略》的女1号——魏璎珞。

确实有几分令妃在剧中的灵动感。

除此之外，Jack Cui还修复了嘉妃和舒妃这两位后宫佳丽的音容笑貌。

「复活术」背后的黑科技

仅根据古代画像，Jack Cui是如何让它们变得活灵活现的呢？

据他介绍，此次「复活术」所用到的技术包括：

• StyleGAN2-Face-Modificator
• Artbreeder
• First-Order-Model
• DAIN

StyleGAN2-Face-Modificator

StyleGAN是英伟达在2018年发布的人脸生成模型，支持2014×1024的高清大图生成。

并在2019年升级成为了效果更加逼真、无暇的StyleGAN2。

而StyleGAN2-Face-Modificator则是基于此，开发出来的人脸编辑工具。

Artbreeder

Artbreeder是一个在线图像生成网站，基于的技术是我们所熟知的生成对抗网络（GAN）。

在Artbreeder上，用户可以通过调整滑块，来创建不同风格的人像、动画。

First-Order-Model

这项技术来自意大利特伦托大学。

一张名人照片，加上随便一段视频，就能让照片里的人物分分钟动起来。

比如输入一段川普的视频，原本静止在画面中的史塔克们，也忍不住跟着动了起来。

DAIN

DAIN是上海交通大学开发的插帧算法，能把30fps的视频一口气插帧到480fps，让视频丝滑流畅，毫无卡顿。

以「琦玉老师」为例，效果如下。

前情回顾：除了后宫佳丽，还有三位皇帝

其实早在今年8月份，Jack Cui就已经利用类似技术，「复活」清朝三位著名的皇帝：康熙、雍正和乾隆。

比起画像中年迈的康熙，AI修复后的样子显得年轻了不少。

修复出来的雍正就比较俏皮了，还学会了「抛媚眼」。

乾隆的样子，可以说是修复出来的皇帝中，最像的一个。

然而，看完这三位皇帝后，有调皮的网友留言道：

最想看的还是朱元璋的帝王之相。

（那张图请自行搜索）……

对话Jack Cui

量子位也联系到了Jack Cui本人，进行了简单的交流。

具有如此鲜活想法的Jack Cui，并不是学生，而是已经步入职场。

至于职业，并无太大悬念——程序员。

在问及「为什么要选择做修复古人画像工作」时，他回答道：

想做一些有趣的东西，修复古人样貌，挺有意义且好玩的一件事。

并且Jack Cui认为，业余时间做这样的事情，对于本职工作来说，「可以一直关注一些前沿算法，保持活力」。

量子位也获取到了他接下来的要做项目的动向，稍微剧透一下：

会出一些技术学习教程，以及软件硬件结合的视频。

感兴趣的读者，可以持续保持关注。

参考链接：
https://www.bilibili.com/video/av842816833/

StyleGAN2-Face-Modificator：
https://github.com/tg-bomze/StyleGAN2-Face-Modificator

Artbreeder：
https://artbreeder.com

First-Order-Model：
https://github.com/AliaksandrSiarohin/first-order-model

DAIN：
https://github.com/baowenbo/DAIN