一帧帧上了颜色的老影像,缩短了年代距离感。
“虽然这已经是多年前的影像,但上色完成后,我却发现影片里的那些人,在当时其实都跟现在的我们差不多大。”曾因复原了百年前的老北京城影像而被广泛关注的网络博主@大谷Spitzer又因AI修复抗美援朝影像引发观看和转发评论热潮。
近日,大谷接受南都记者采访时介绍,区别于以往的影像修复,在这次的修复中,他运用了一个新的技术流程。接下来的一段时间里,他还计划着手修复元朝皇帝画像、四大美女画像等历史图片和影像。“我也期待有更多人参与进来,在评论区‘交作业’”。
“用到了新的硬核技术,解决修复的难题”
“我女朋友的外公曾经是抗美援朝的老兵。我在网上也看到了北京电影制片厂摄制的《抗美援朝》纪录片,里面的很多片段和镜头都很触动人。”大谷接受南都记者采访时表示,带着这样的触动和共鸣,大谷决定着手上色修复一段抗美援朝的现实影像,其中包括我国志愿军跨过鸭绿江的珍贵镜头。
大谷最新作品推出后,被多个平台转载。
修复前后对比。
修复后的影像中的一幕。
修复后的影像中的一幕。
此前,主业为独立游戏开发者的大谷就曾利用AI技术修复过影一些像,发布在多个平台上。南都记者也曾在大谷发布第一期“百年前的北京”影像修复视频后对其进行采访。当时,自称“人工智能初学者”的大谷也和记者分享了他修复影像的技术手段和过程。
据大谷介绍,区别于以往的影像修复,在这次的修复中,他运用了一个新的技术流程,使用了支持TensorFlow、Flink等多种计算框架的机器学习平台PAI来在线进行了AI部分修复的工作。这支视频的主要修复工作,包括人脸精修等,都是通过PAI在德国法兰克福的服务器远程操作的。
此外,本次影像修复的主要技术难点在于一些多人物行进镜头的修复。而大谷则利用科技公司的开源AI项目GPEN,通过增加更多参考帧,使用与其他AI上色分辨率提升模型拼合的方法解决了难题。
用AI技术回望历史的彼岸
“虽然这已经是多年前的影像,但上色完成后,我却发现影片里的那些人,在当时其实都跟现在的我们差不多大。当年,就是这样一批同样年轻的人,为了国家、为了理想,献出自己生命,真的非常让人震撼。”大谷这样描述这支视频修复完成以后自己的感受。而他发布视频,正是想把这样的感受传递给更多人。
在大谷网络平台上的个人空间,有一个被命名为“【人工智能影像修复】历史的彼岸”的频道。
自去年5月起,这个频道里已经收录了15支视频,其中涉及中国历史和文化的就有13支,从“百年前的北京”到“老上海时装秀”,从“三国演义”到“五四运动”,大谷一直在探索用AI技术回望历史的彼岸,实现“穿越时空的对视”。
大谷个人空间上的作品。
“一开始,我只是想通过人工智能技术给我自己的游戏开发提升一些效率,但是后来发现其实还可以利用这些技术做很多有意思,或者是有社会价值、社会意义的应用,所以我就想着分享给大家。”讲起利用AI技术修复历史文化相关的视频,大谷显得很激动。
“其实欧美也有很多人在做影片修复,但大都是做的欧美老电影,很少有咱们中国自己这边的题材。我就想,为什么我们不可以自己做这个呢?”大谷说道。
凭借着对中国历史和传统文化的热爱,以及对AI技术的兴趣,大谷从“百年前的北京”开始,坚持着“历史的彼岸”这一频道的视频更新,“一发不可收拾”,已经超过一年。
此前,在大谷和人民日报合作的“让李大钊陈延年们露出微笑”的项目中,他曾将“AI修复的意义”定义为“五分钟彼岸”的概念:“在这个纷繁复杂的现代社会中,可能抽个五分钟去看一段古代的影像,看看当时的古人们是如何生活的,他们所思所想是怎样的。”
“每个人都可以成为艺术家、创作者”
大谷修复影像的技术和创意也吸引了越来越多的人。
诸多媒体开始和大谷建立了联系,并保持着一定的合作频率。大谷介绍道,“我们最早是在‘老北京’的第二期视频开始的合作。通常是这些媒体老师找到我,沟通题材,如果大家都感兴趣,我们就合作发布。”
2020年推出的AI修复老北京影像让大谷受到了关注。
尽管在AI修复技术上,大谷得到了许多关注,但大谷也坦言,目前自己仍然希望以独立游戏开发为主,不会太倾向于基于AI修复进行过多商业合作,而是更多地把它当做一个兴趣。
“我还是希望更多地做我自己感兴趣的东西,同时也能让更多人对这个(AI技术)感兴趣。”大谷表示,作为使用者,人工智能技术的应用并没有大多数人想得那么深奥。
“我也希望在看过我的视频之后,大家都能去多多尝试,包括AI修复、AI作曲等,用它来进行艺术创作。我相信每个人都可以成为艺术家、创作者。”
接下来的一段时间里,大谷还计划着手修复元朝皇帝画像、四大美女画像等历史图片和影像。“我也期待有更多人参与进来,在评论区‘交作业’”,大谷开心地表示。
出品:南都科创工作室
采写:南都记者 徐劲聪 实习生 刘夏菲
编辑:任先博