影视作品是不同时代文化特点的缩影,也是不同时期科技水平的体现。从黑白到彩色,从胶片到数字,科技的不断发展让影视作品以色彩更丰富、画面更高清的形式呈现,也为经典影片焕发新生机提供了可能。
电影修复工作者就像“胶片医生”,针对老旧影片存在的分辨率低、噪点高、色彩饱和度低等问题进行修复,为经典老片披上崭新的外衣。传统人工手动的逐帧修复方式,既费时又耗力。近年来,随着AI技术的不断突破,AI越来越多地应用到老旧影片的修复中,质量和效率比以往都有所提升。然而,面对有诸多细分环节的电影修复工作,目前业界针对特定任务训练模型的模式虽然可以满足部分需求,但传统模型研发所需数据和时间成本高,也不能充分考虑不同细分任务间的相关性,工作效率和修复效果仍存在提升空间。
人工智能超大规模预训练技术的突破,为高质高效的影片修复和超清化提供了更加智能的解决方案。近日,百度联合电影频道节目制作中心(简称“电影频道”)发布业内首个影视行业智感超清大模型——电影频道-百度·文心,用一个模型同时处理影片修复的多个任务,助力电影频道全方位提升视频修复效率,为用户带来更加清晰绚丽的超清画面和更震撼的观感体验。
电影频道-百度·文心大模型 |
今年是《超高清视频产业发展行动计划(2019—2022年)》发布实施的收官之年,三年多以来,电影频道一直致力于推进超高清内容与5G、AI等技术深度融合,尤其是探索利用AI技术进行影片修复,来丰富电影频道的超高清视频内容。
作为最受电影机构认可的中国电影平台,电影频道旗下拥有的CCTV-6和CHC系列付费频道及CMC系列国际频道,全部是以播放电影为主的专业频道,每天播出影片约七十多部次。电影频道拥有约2万部中外电影资源,超过半数以上是用胶片拍摄的。虽然这些电影资料已经数字化保存,但原始胶片保存过程中出现的褪色、划痕、脏点等损坏情况,直接影响了影片画质,降低了播放质量,亟待修复。另一方面,随着拍摄、存储、传输、显示等各个维度的技术进步,人们的娱乐视听体验相比几十年前发生了天翻地覆的变化,观众对超高清视频的需求量不断提升。
如何高效率、低成本、高质量地实现影片的修复和超清化,将是亟待解决的重要问题。基于此,百度和电影频道联合研发的电影频道-百度·文心大模型,能够实现视频全方位超高清AI修复,高效地提升画质。
测试数据显示,使用电影频道-百度·文心大模型每天可修复视频28.5万帧,解决了绝大部分画面的修复问题。即便是需要进一步精修,修复速度也能提升3-4倍。此外,电影频道-百度·文心大模型在影视视频制作中同样具有广泛的应用前景,例如在老片超清化上,可针对影片进行自适应色彩增强、清晰度增强、时序插帧、SDR转HDR等,全面提升老电影的画质、使其焕发新生机,让优秀的经典老电影能够满足新时代的观影画质要求。
此次百度和电影频道联合发布的智感超清大模型,深度结合了百度AI技术能力和电影频道长期积累的视频修复数据,通过对超分辨率、去噪、去模糊、去压缩等多任务的联合预训练、亿级参数量的学习,同时实现对多种损坏情况的修复,并通过画质提升、边缘锐化等方式增强视频的清晰度,达到全方位提升视频修复效率和观感体验的效果。
上图右侧为电影频道-百度·文心大模型修复画面,选自电影《横空出世》 |
百度拥有全自研的昆仑芯片和深度学习平台飞桨,已形成软硬一体、云端服务+私有化软件的整套影片修复产品方案,使得修复的效率更高、成本更低。文心大模型具备更好的泛化能力,可以加快AI修复在影视频行业的落地,让更多经典影像视频具备更好的主观效果,从而发挥更大的文化和商业价值。
从技术研发到落地应用,大模型的发展已经进入产业落地的关键期,与产业场景需求的高度契合是大模型真正助力产业发展的重要前提。文心行业大模型机制,是百度与行业头部企业联合探索出的一套行之有效的大模型产业落地方法,让大模型在行业实际场景实现“不但能用还便捷好用”的价值。
目前百度已联合国家电网、浦发银行、中国航天、人民网发布了电力、金融、航天、传媒行业大模型,并持续探索在行业更多场景的应用,助力产业智能化。在即将举办的WAVE SUMMIT+2022深度学习开发者峰会上,文心大模型将带来更多行业的落地进展。
当前,国家高度重视超高清视频产业的创新发展,超高清已是大势所趋。此次电影频道-百度·文心大模型的发布,是百度与电影频道多年合作探索视频行业智能化升级的最新成果。未来,百度将持续与电影频道深度合作,通过大模型等前沿AI技术进行视频的修复和智能化制作,深度赋能超高清显示领域,实现技术激活内容产业价值,助力文化经典的代际传承。