记忆可以被修复吗?
2022年,抖音给这个问题带来了新答案。
7月3日晚7点,抖音&火山引擎超清修复Beyond1991年生命接触演唱会精选及纪念演唱会精选,在抖音、西瓜视频、今日头条、鲜时光TV平台直播重映。
在很多8090后心中,黄家驹样貌记忆逐渐模糊,但关于他的旋律、精神与信念却永远清晰。
这一次,样貌和精神,都同时以更清晰的姿态出现在了歌迷眼前。
技术支持下,“老片子”正在变得更清晰
《光辉岁月》《海阔天空》《喜欢你》《不再犹豫》……演唱会上,经典歌曲的一一出现,让人似乎又回到了曾经的“那个夏天”。
与以往的影像材料不同,这一次,观众眼里的“夏天”更清晰了。
画质上,火山引擎多媒体实验室通过清晰度增强和瑕疵修复、分区域色彩亮度增强、自适应人像增强等算法,处理早期软硬件设备落后带来的噪声、画面模糊、色彩失真等问题。
针对音质上的响度、噪声干扰、带宽不足等问题,火山引擎音频技术团队通过音频降噪、音频超分和响度算法,消除噪声,提升音质。
上述效果的实现并不是一件容易的事儿。
早期演唱会片源在制作、压缩、传输等过程中都可能引入各种清晰度上的退化和瑕疵问题。在拍摄上,早期的录影设备解析度差,其拍摄的画面分辨率较低并且清晰度差,存在画面模糊、纹理缺失等问题,此外过去相机感光元件较差,也会引入拍摄的泊松噪声。在压缩存储上,早期影片一般采用隔行扫描的方式进行处理、编码、显示,该方式会带来交错条纹的瑕疵问题,对画面的美观性和完整性都有较大影响,并且上个世代的视频编码器压缩效率低,会导致压缩噪声和纹理丢失的问题。
这意味着,要处理成因复杂退化的同时恢复尽可能多的细节,是算法处理的难点。
他们是如何突破这些难点的?
在清晰度恢复上,平台修复能力基于在大量数据上训练的深度学习算法,可以将视频的分辨率档位的从低清处理至超高清,同时在缺少纹理的区域生成更丰富的细节;在瑕疵消除上,该算法利用了基于运动补偿的深度学习多帧去交错算法,解决隔行扫描格式的视频去交错后存在的拉丝和横纹情况,特点是通过网络提取运动信息来对齐运动场景的交错内容;此外针对拍摄、压缩等导致的噪声均进行了专门的模块设计,结合了传统信号处理的鲁棒性优势与深度学习的性能优势。
火山引擎已在这个领域积累了大量技术优势,让其修复出的效果更清晰逼真。
比如,火山引擎多媒体实验室针对具体片源效果,依据美学评分,在色调、亮度、对比度、饱和度、人像ROI和背景区域分别增强,并根据不同帧的色彩统计信息进行自适应亮度增强,使亮区与暗区都能得到最好的表现效果。
此外,画质修复技术团队都是90年后出生的,像Beyond的《海阔天空》、《光辉岁月》、《真的爱你》这些歌,他们是从小听到大。所以接到处理Beyond演唱会的旧影像时,他们都很兴奋,希望通过算法尽可能地呈现一个清晰生动的演唱会给大家。
“当把片源中的伪像一层层剥离,一点点还原出演唱会里的那种热闹气氛,我们有一种身临其境的感觉。”一位亲身参与其中的火山引擎工程师说。
更多人参与,“精神养分”让“文化土壤”变得更深厚
Beyond在香港红勘体育馆举行“BEYOND生命接触演唱会”,是黄家驹时期Beyond举办的最成功的一场演唱会,全世界Beyond歌迷最早了解到的Beyond演唱画面大部分都出自该演唱会。这场演唱会中的编曲、solo等成为很多人的音乐启蒙。
同年12月发行演唱会现场录音专辑及影碟,收录了除《海阔天空》以外的大部分Beyond经典曲目,在内地发行广泛,是70、80、90后几代人的青春记忆。
新的修复视频修复技术,正在让更多“记忆”变得清晰。
去年10月,继发起“古籍保护专项”行动让古籍字符“跳动”之后,西瓜视频又发布了“经典中视频4K修复计划”,通过火山引擎的技术力量和西瓜视频的平台,对这些经典影视作品进行4K修复和传播,让经典影视作品实现“新生”,为优秀文化的传承和传播打开通道。
能不能让更多的作品得到良好的修复?
答案是肯定的。
近年来的AI修复技术逐渐成熟,大大降低了去噪、去模糊、去划痕等工作的难度和成本。火山引擎有独立的视频质量评估体系,针对每部作品定制修复方案,以实现最佳修复效果。还将开放修复入口,为普通用户免费提供AI修复支持。
西瓜视频也宣布,对有价值的老视频,提供深度的公益修复。“我们希望上一个时代的好内容在今天依然能焕发同样的光彩,也欢迎其他版权方联系我们,针对有史料价值的老视频,我们也将提供免费高清修复。”西瓜视频相关负责人说。
抖音积极投身到修复旧视频的公益活动中去,对于纾解经典视频作品流传的困境,是大有裨益的。
这是企业对社会责任的担当,也是技术对文化的敬畏和反哺。技术的使命,绝不仅是为了挖掘商业价值,更应该主动追求社会效益。从此意义上而言,抖音做了很好的带头作用。
经典作品的4K修复,是对经典的重现,也是对记忆的唤醒,更是为了促进文化的绵延。更多新生技术力量的注入,更多人的参与,不仅减少了经典流传的阻隔,更是让这些经典作品的历史印记和文化内核清晰了起来、明朗了起来。
从数据看,受众对这样的流传方式是认可的。这次超清修复的Beyond1991年生命接触演唱会,短短的一天,已经超过1.4亿人次收看。
可以预见,在技术支持下,随着更多经典作品的修复与传播,文化的土壤必然会变得更加深厚。更多充满精神养分的“记忆”将变得更清晰。
2023-02-27
2023-01-10
2022-12-20
2022-12-08
记忆可以被修复吗?
2022年,抖音给这个问题带来了新答案。
7月3日晚7点,抖音&火山引擎超清修复Beyond1991年生命接触演唱会精选及纪念演唱会精选,在抖音、西瓜视频、今日头条、鲜时光TV平台直播重映。
在很多8090后心中,黄家驹样貌记忆逐渐模糊,但关于他的旋律、精神与信念却永远清晰。
这一次,样貌和精神,都同时以更清晰的姿态出现在了歌迷眼前。
技术支持下,“老片子”正在变得更清晰
《光辉岁月》《海阔天空》《喜欢你》《不再犹豫》……演唱会上,经典歌曲的一一出现,让人似乎又回到了曾经的“那个夏天”。
与以往的影像材料不同,这一次,观众眼里的“夏天”更清晰了。
画质上,火山引擎多媒体实验室通过清晰度增强和瑕疵修复、分区域色彩亮度增强、自适应人像增强等算法,处理早期软硬件设备落后带来的噪声、画面模糊、色彩失真等问题。
针对音质上的响度、噪声干扰、带宽不足等问题,火山引擎音频技术团队通过音频降噪、音频超分和响度算法,消除噪声,提升音质。
上述效果的实现并不是一件容易的事儿。
早期演唱会片源在制作、压缩、传输等过程中都可能引入各种清晰度上的退化和瑕疵问题。在拍摄上,早期的录影设备解析度差,其拍摄的画面分辨率较低并且清晰度差,存在画面模糊、纹理缺失等问题,此外过去相机感光元件较差,也会引入拍摄的泊松噪声。在压缩存储上,早期影片一般采用隔行扫描的方式进行处理、编码、显示,该方式会带来交错条纹的瑕疵问题,对画面的美观性和完整性都有较大影响,并且上个世代的视频编码器压缩效率低,会导致压缩噪声和纹理丢失的问题。
这意味着,要处理成因复杂退化的同时恢复尽可能多的细节,是算法处理的难点。
他们是如何突破这些难点的?
在清晰度恢复上,平台修复能力基于在大量数据上训练的深度学习算法,可以将视频的分辨率档位的从低清处理至超高清,同时在缺少纹理的区域生成更丰富的细节;在瑕疵消除上,该算法利用了基于运动补偿的深度学习多帧去交错算法,解决隔行扫描格式的视频去交错后存在的拉丝和横纹情况,特点是通过网络提取运动信息来对齐运动场景的交错内容;此外针对拍摄、压缩等导致的噪声均进行了专门的模块设计,结合了传统信号处理的鲁棒性优势与深度学习的性能优势。
火山引擎已在这个领域积累了大量技术优势,让其修复出的效果更清晰逼真。
比如,火山引擎多媒体实验室针对具体片源效果,依据美学评分,在色调、亮度、对比度、饱和度、人像ROI和背景区域分别增强,并根据不同帧的色彩统计信息进行自适应亮度增强,使亮区与暗区都能得到最好的表现效果。
此外,画质修复技术团队都是90年后出生的,像Beyond的《海阔天空》、《光辉岁月》、《真的爱你》这些歌,他们是从小听到大。所以接到处理Beyond演唱会的旧影像时,他们都很兴奋,希望通过算法尽可能地呈现一个清晰生动的演唱会给大家。
“当把片源中的伪像一层层剥离,一点点还原出演唱会里的那种热闹气氛,我们有一种身临其境的感觉。”一位亲身参与其中的火山引擎工程师说。
更多人参与,“精神养分”让“文化土壤”变得更深厚
Beyond在香港红勘体育馆举行“BEYOND生命接触演唱会”,是黄家驹时期Beyond举办的最成功的一场演唱会,全世界Beyond歌迷最早了解到的Beyond演唱画面大部分都出自该演唱会。这场演唱会中的编曲、solo等成为很多人的音乐启蒙。
同年12月发行演唱会现场录音专辑及影碟,收录了除《海阔天空》以外的大部分Beyond经典曲目,在内地发行广泛,是70、80、90后几代人的青春记忆。
新的修复视频修复技术,正在让更多“记忆”变得清晰。
去年10月,继发起“古籍保护专项”行动让古籍字符“跳动”之后,西瓜视频又发布了“经典中视频4K修复计划”,通过火山引擎的技术力量和西瓜视频的平台,对这些经典影视作品进行4K修复和传播,让经典影视作品实现“新生”,为优秀文化的传承和传播打开通道。
能不能让更多的作品得到良好的修复?
答案是肯定的。
近年来的AI修复技术逐渐成熟,大大降低了去噪、去模糊、去划痕等工作的难度和成本。火山引擎有独立的视频质量评估体系,针对每部作品定制修复方案,以实现最佳修复效果。还将开放修复入口,为普通用户免费提供AI修复支持。
西瓜视频也宣布,对有价值的老视频,提供深度的公益修复。“我们希望上一个时代的好内容在今天依然能焕发同样的光彩,也欢迎其他版权方联系我们,针对有史料价值的老视频,我们也将提供免费高清修复。”西瓜视频相关负责人说。
抖音积极投身到修复旧视频的公益活动中去,对于纾解经典视频作品流传的困境,是大有裨益的。
这是企业对社会责任的担当,也是技术对文化的敬畏和反哺。技术的使命,绝不仅是为了挖掘商业价值,更应该主动追求社会效益。从此意义上而言,抖音做了很好的带头作用。
经典作品的4K修复,是对经典的重现,也是对记忆的唤醒,更是为了促进文化的绵延。更多新生技术力量的注入,更多人的参与,不仅减少了经典流传的阻隔,更是让这些经典作品的历史印记和文化内核清晰了起来、明朗了起来。
从数据看,受众对这样的流传方式是认可的。这次超清修复的Beyond1991年生命接触演唱会,短短的一天,已经超过1.4亿人次收看。
可以预见,在技术支持下,随着更多经典作品的修复与传播,文化的土壤必然会变得更加深厚。更多充满精神养分的“记忆”将变得更清晰。
2023-02-27
2023-01-10
2022-12-20
2022-12-08
单位地址:北京市丰台区马家堡东路121号院2号楼16层违法和不良信息举报电话:010-53657566
相关查询