腾讯多媒体实验室技术解析“中国戏曲数字焕新行动”阶段性工作
发表于 2025-03-27 23:38:51

近日艺术发展中心发布“中国戏曲数字焕新行动”阶段性成果,据了解,该行动是由艺术发展中心和腾讯联合发起,依托腾讯AI影像修复、沉浸式6DoF、AI人脸融合、虚实融合等诸多先进数字技术,实现京剧6DoF程式录制及数字转化、35部经典戏曲高清复原等突破性进展,为百年戏曲艺术注入数字生命力。

中华人民共和国文化和旅游部

“为更好地推动中国戏曲创造性转化和创新性发展,探索数字技术助力戏曲传承和传播。在文化和旅游部艺术司的关心和指导下,艺术发展中心与腾讯联合发起了“中国戏曲数字焕新行动”,依托腾讯AI影像修复、沉浸式6DoF、AI人脸融合、虚实融合等数字技术,助力戏曲艺术面向大众层面的创新传播。 ”

“项目自2023年12月份启动至今,已取得了阶段性成果,包括发布《中国戏曲数字焕新蓝皮书》,完成京剧6DoF程式录制及数字转化、2024和2025戏曲焕新小年夜主题直播、35部经典戏曲影像资料AI修复,以及上线戏曲数字资源库专区、五套经典戏曲变装特效模板等内容。其中两次直播都结合核心技术,同时邀请多个剧种的戏曲院团参与录制,将经典戏曲剧目同数字技术进行巧妙地融合。此外,全国范围内《戏曲歌曲创作征集》活动同步启动,通过更流行多元的形式来宣传戏曲,进一步提升戏曲的传播力。”

以上引用自:中华人民共和国文化和旅游部官网

‍‍‍‍‍‍‍‍‍

基于腾讯多媒体实验室自研的6DoF(六自由度)技术,可以360度解构经典戏曲程式,唱、念、做、打,戏曲的一招一式皆有程式,代表着戏曲的“身法之韵”,观众可以在任意角度放大、缩小观看,甚至能够高清呈现演员的手腕转动、眼波流转等十分微小的动作和情绪,可以为戏曲教学提供立体、多维的细节。

(6DoF技术录制的经典京剧程式)

腾讯多媒体实验室自研的6DoF(六自由度)技术与仅能在固定视角中旋转的VR360三自由度不同,6DoF(六自由度)技术使用户能够在三维空间内自由移动,并在任何位置和角度进行观察,从而带来更加丰富的互动性和沉浸感。这种自由度的提升依赖于体积视频技术,能够在三维空间中呈现真实的物体和场景。实现6DoF体验的关键技术包括体积视频的压缩、传输和渲染,它们确保了巨大的数据量能够在不同设备和平台之间高效流动并呈现出精细的视觉效果。腾讯多媒体实验室通过对视频压缩算法的优化,提升了数据传输效率,同时加强了终端设备的渲染能力,确保在头显、网页、手机终端以及微信小程序等多个平台上都能流畅播放6DoF体积视频,从而有效扩大了这一技术的受众群体和应用场景。

河南豫剧院演员吴素真现场演绎教学了豫剧程式“摘花”,她表示:“程式是戏曲表演艺术的基础,也是帮助戏曲演员塑造人物的灵魂。6DoF技术对程式的多角度呈现,能够为戏曲教学、研究等多种场景带来助力,让老师教得更清楚,学生也学得更轻松。”

藉由腾讯多媒体室实验室自研的AI影像修复技术修复的经典戏曲片段,通过先进的AI算法,能够做到“修旧如旧”,让京剧《逍遥津》、豫剧《花木兰》、越剧《玉蜻蜓·前游庵》等传世的光影得到“原汁原味”的复原,真实、生动地还原穿越古今的“家国之韵”。

(AI修复技术重现越剧《玉蜻蜓·前游庵》)

AI影像修复技术沉淀了腾讯多媒体实验室多年的多媒体通信和处理研发经验,包含多项业界领先的老片修复技术,涵盖四大模块:智能分析、画质修复、画质增强和智能编码。

首先,利用多种智能评估算法的智能分析模块会对视频内容进行全方位、多维度分析,主要为了评估视频的运动和纹理复杂度、压缩失真程度等。

得到不同维度的分析结果后,画质修复模块就能利用多种智能算法,有的放矢地修复各类破坏画质的主要因素,包括但不限于划痕、竖线、雪花点、噪声、压缩失真、抖动等问题。

紧接着,画质增强模块便会选择最佳视频增强算法,对画面进行多维度画质提升,在空间和时间上提升视频的分辨率和帧率,在空域上提升细节清晰度、色彩丰富度。

在完成视频修复及画质增强后,智能编码模块可以通过自适应编码在减少输出文件大小、视频传输成本的同时,保证视频的主观质量不受影响,实现最佳的画面效果。

“人工修复比较依赖修复者的经验和其对于画面的理解度,不同人修复的同一个画面可能会存在较大差别。”据腾讯多媒体实验室研发同事介绍,AI影像修复技术可以很好地避免这个问题,在尊重历史和原版的基础上,保证画质的提升。

通过腾讯多媒体实验室虚实融合互动技术,可以实时地将表演融入到3D虚拟场景里,并与NPC、道具进行互动,满足观众对戏曲意境的更多想象。在直播间中,观众身临其境的感受到了越剧《十八相送》中梁山伯与祝英台在西湖边依依惜别的情景。

(虚实融合互动技术生动呈现西湖“十八相送”情景)

腾讯多媒体实验室负责人、腾讯杰出科学家刘杉博士表示:“科技是推动发展的核心引擎,更是赋能产品创新、业务升级与公益事业的关键力量,腾讯多媒体实验室始终践行‘用户为本,科技向善’,在推动多媒体及相关领域的国际和国家标准制定,打造音视频、互动沉浸和智能媒体核心能力矩阵的同时,持续助力腾讯可持续社会价值事业部以及公司的多个业务部门服务全球用户、助力行业发展并践行科技向善、推动数字文化传承。”

腾讯可持续社会价值事业部数字文化实验室负责人舒展表示:“腾讯数字文化实验室从建设伊始,就开始系统化挖掘文化遗产保护和传承中遇到的难点、痛点,助力传统文化传承和数字科技深度结合。未来,腾讯希望通过数字科技,不仅能够永久保存珍贵的戏曲文化遗产,还能让它在新时代焕发新生。”数字技术的创新应用,不仅能助力戏曲保护和传承,也为戏曲的传播插上了创新之翼,让戏曲传播形式更多元、让受众参与体验更沉浸,从而让更多人了解戏曲、爱上戏曲。


「免责声明」:以上页面展示信息由第三方发布,目的在于传播更多信息,与本网站立场无关。我们不保证该信息(包括但不限于文字、数据及图表)全部或者部分内容的准确性、真实性、完整性、有效性、及时性、原创性等。相关信息并未经过本网站证实,不对您构成任何投资建议,据此操作,风险自担,以上网页呈现的图片均为自发上传,如发生图片侵权行为与我们无关,如有请直接微信联系g1002718958。

CSDN官方微信
扫描二维码,向CSDN吐槽
微信号:CSDNnews
微博关注
【免责声明:CSDN本栏目发布信息,目的在于传播更多信息,丰富网络文化,稿件仅代表作者个人观点,与CSDN无关。其原创性以及文中陈述文字和文字内容未经本网证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本网不做任何保证或者承诺,请读者仅作参考,并请自行核实相关内容。您若对该稿件有任何怀疑或质疑,请立即与CSDN联系,我们将迅速给您回应并做处理。】