AI修复 扮靓影像

  徐嘉伟

  从1839年达盖尔发现银版摄影术,到1895年卢米埃尔兄弟放映天下上第一批影片,再到现在智能手机赋能一样平常纪录,影像一直是“匹敌”流淌一直的时光长河、“留住”历史瞬间的主要载体。

  当经典影像从是非酿成彩色,从模糊变得清晰,AI影像修复让观众在更佳的旁观体验中感受到科技的气力。

AI修复 扮靓影像

  1998年国产歼—10首飞AI修复对比画面。

  优化旁观体验

  去年4月1日,张国荣《热·情》演唱会超清修复版一经上线就“刷屏”了众多用户的同伙圈,吸引了3000多万人在线旁观。

  “一次有时的时机,我们接触到宝丽金,他们正在寻找相关修复手艺,于是人人一拍即合,最先了《热·情》演唱会的修复。”腾讯多媒体实验室视频处置手艺认真人夏珍告诉记者,整个项目的流传效果完全超乎预期,也让团队看到老片修复在“C端”也异常有价值。

  一场23年前的演唱会,摄制水平与当下一定无法相比,再加上演唱会场景中灯光庞大多变、人物运动等多重因素的影响,AI若何顺遂完成修复事情?“整个修复历程基本是自动化的,主要包罗智能剖析、画质修复、画质增强和智能编码四个模块。”夏珍逐一先容了其中的原理,在智能剖析环节,对噪声、划痕、亮度、饱和度等维度举行数据剖析;获得剖析效果后,举行画质修复和画质增强,去除噪声、划痕、压缩失真等损坏画质的因素,并举行分辨率提升、色彩增强、倍帧等画质增强处置;最后则是行使编码手艺对视频举行智能压缩,在保证画质的条件下只管压缩视频文件尺寸,便于流传、旁观。

  在特定内容修复之外,AI影像修复手艺也已应用于影视剧修复当中。自2017年最先启动“高清修复设计”以来,优酷已经修复完成6000多部经典影视作品,多部早期影视剧修复后分辨率到达了4K的水平,其中不乏《唐伯虎点秋香》《红楼梦(1987版)》《新白娘子传奇(1992版)》等受到观众好评和喜欢的剧集。

AI修复 扮靓影像

  《新白娘子传奇(1992版)》AI修复前后对比画面。

  “《新白娘子传奇》是我介入修复的第一部影视剧,由于整体画质对照模糊,我们在AI模子训练历程中通过调整损失函数和训练方式,让模子具备了更强的天生能力。”优酷算法工程师李通在人脸修复方面颇有研究,经由他和同事的起劲,睫毛、头发、皮肤纹理等高频细节都能够在画面分辨率放大的历程中,既去模糊,又获得细节补足,进而提升用户的旁观体验。

  传承历史影象

音乐家舒楠:心和老百姓在一起,歌才动人

“我觉得做音乐是我的起点,我的终极目标是要服务社会。”北京电影学院教授、音乐家舒楠说。在日前举行的中国文艺志愿者协会第三次全国代表大会上,舒楠当选中国文艺志愿者协会第三届副主席。

  “院线影戏《追光万里》当中的经典影像修复,是我们团队接手的第一个有代表性的AI影视修复项目,那时我们用了半年左右的时间,陆续修复了影戏中用到的纪实片断,其中包罗黎民伟、黄柳霜、李小龙等人的珍贵影像史料,最早的可以追溯到上世纪20年月。”回忆起修复“粤籍影戏艺术家”真实影像资料的历程,夏珍感伤万千,在他看来,这些纪实片断的修复,不仅提升了观感,更让观众得以触摸历史。

  这种触摸历史、传承影象的感受在重大节点和历史事宜的影像修复上体现得尤为显著。去年国庆节,由央视军事与腾讯多媒体实验室联同谋划的“彩色超清重现国庆阅兵高燃瞬间”用百余秒的时间带观众回首了新中国15次国庆阅兵的珍贵历史瞬间,相关话题阅读量仅在微博平台就超2257万次。

  其中,由于手艺水平有限,1953年到1958年的阅兵式影像素材均为是非影像。为了更清晰、生动地还原昔时阅兵式的盛况,夏珍和团队基于腾讯“光影焕新”智能影像修复平台,对这些是非老片做了针对性处置。“这项事情并不是简朴的一键上色。首先我们需要将视频拆分成一个个子视频,给每一个子视频中的一个要害帧上色,再由算法完成相邻的前后帧的自动化上色修复,最终形成完整的修复视频。”夏珍说,为了保证上色的准确性,团队还专程造访了军事专家,确定差异制式服装、武器装备的颜色,校对时甚至细化到了老兵胸口佩带的一枚勋章上差异条纹的详细颜色。

  “‘科技向善’是腾讯多媒体实验室的一个主要课题,我们一直在思索若何让手艺在商业价值之外,施展更大的社会价值。”夏珍示意,观众的点赞、转发等互动,正是科技的理性和情绪的温暖实现融会的最佳体现,通过AI手艺让观众与祖国发生跨越时间的情绪共识,让他异常有成就感。

  在专业机构之外,不少手艺达人也在行使AI工具生产相关修复视频。B站UP主@大谷的游戏创作小屋和人民日报先后互助了《AI修复歼击机首飞名排场》《AI画出一条大河海浪宽》《AI修复珍贵画面∣中国民众欢庆日本投降》等视频,在八一建军节、国庆节、日本宣布无条件投降纪念日等主要节点均取得了不错的流传效果。在人民群众敲锣打鼓、举着火炬游行的彩色修复画面上,“最喜欢AI的一集”“真正的万人空巷”等弹幕不时飘过。

  应用远景广漠

  当前,随着短视频拍摄、创作工具的不停厚实,短视频平台用户在旁观之余,也日渐介入到短视频生产中。数据显示,住手2023年二季度,快手应用的DAU(平均日活跃用户数)和MAU(平均月活跃用户数)划分是3.76亿和6.73亿,逐日的视频上传量在万万级。

  “拍摄装备的硬件水平崎岖、二次创作历程中使用的素材质量差异、用户编辑和上传历程中多次转码造成的压缩损伤等因素都市给视频画质带来影响。”快手手艺职员先容,为了能让用户获得加倍清晰的旁观体验,音视频手艺团队深入研究智能音视频修复及增强处置等相关手艺,打造并落地了智能增强修复方案整合产物“快手质臻影音”,将AI手艺应用于用户的一样平常使用历程中。

AI修复 扮靓影像

  AI修复后的《红楼梦(1987版)》。

  不管是经典影像修复照样用户生产内容的智能增强,实在都还只是AI手艺在视频画质修复维度的应用。

  在采访最后,记者请几位手艺大咖聊了聊AI影像修复手艺在未来值得期待的应用和生长偏向。

  在夏珍看来,作为AIGC(AI天生内容)的基础组件,画质增强手艺在文生图、文生视频等偏向上能辅助节约天生时间,天生更大、更清晰的图像和视频;在3D偏向(如人脸建模)上使用超分手艺则能大幅度提升建模的效果;随着手机等移动装备的处置能力不停提升,在云游戏、直播等场景下,超分手艺也能辅助移动端用户获得更好的画质体验。

  “AI修复手艺自己是可批量复制的,这也就意味着我们可以降本增效,大大提升修复效率和质量。但现在AI修复也存在一定局限,AI可以解决80%的问题,剩下20%的定制化、气概化的修复需求,AI的显示尚不如人工。”李通示意,下一步,他们将通过算法迭代和优化,不停提升修复模子的通用性、稳固性和气概化修复能力,拓展AI影视修复效能,延伸更多经典影视作品的生命力。

  (本文配图由受访者提供)

[
责编:张晓荣
],

原创文章,作者:移动端APP开发,如若转载,请注明出处:https://www.kkxmy.com/apph5/82580.html

(0)
移动端APP开发
上一篇 2023年9月20日 14:36
下一篇 2023年9月20日 15:28

相关推荐