本期导读
编者按
2025年初,国产AI大模型DeepSeek在世界人工智能领域产生了极其重要和十分深远的影响,其综合运用模型架构创新、算法创新、算力优化和开源开放,产生了卓越的性能表现和显著的成本降低。与此同时,国产动画电影《哪吒之魔童闹海》在内容创作、制作生产、技术品质、视听体验、票房收入等方面的卓越表现实现了中国电影的诸多重大历史性突破。上述智能科技与电影文化领域的两大事件,时间相近,不谋而合,意义深远,相辅相成,必将引领现代智能科技与中华优秀文化在自主创新、自立自信、融合并进、自强不息的道路上不断取得新的重大进展和实现新的重大突破。DeepSeek和《哪吒之魔童闹海》所展现出的中国自主科技的强大创新能力和中国电影文化的巨大发展潜力,将持续激励中国电影人以科技自立自强和文化自信自强为目标,不断创作生产出更多兼具卓越科技品质、优秀创作水准和深厚文化底蕴的精品力作。本期特设声音采集与控制专题,组约了高阶声场记录与重放、配音表演驱动角色塑造、演员提示通讯系统搭建等文章,探讨用声音营造沉浸式体验和引发情感共鸣的技术路径,同时遴选摄影机定位追踪、VR电影空间映射、数字资产3D建模、数字人三维面部动画生成、视效工程发展、影视内容标识化管理等论文,欢迎广大读者关注。
——本期责编
专家点评
在习近平文化思想和党的二十大及系列全会精神的科学指引与系统部署下,电影领域改革发展持续深化,电影科技能力显著增强,电影产业加快提质升级。伴随观众对高品质沉浸式视听体验的需求日益增长,高新技术格式电影摄制播映技术与工艺流程不断优化,虚拟现实(VR)、增强现实(AR)、扩展现实(XR)等技术的发展与应用为电影产业注入了新活力与新动能,并成为推动电影产业创新升级的重要力量。高阶高保真立体声(HOA)作为一种先进的沉浸式音频录制与还音技术,其核心优势在于能够精准捕捉和重现三维空间中的声场信息,通过球面传声器阵列采集声场信号,并灵活适配多种还音环境。HOA技术能够提供更为丰富的空间声学线索,显著提升音频沉浸感,未来其与人工智能(AI)技术相结合,势必进一步优化和提高电影音频制作的效率和质量,推动声场记录与重放技术的智能化演进。《基于球麦克风阵列的高阶声场记录与重放在电影音频制作中的应用》作为本期“声音采集与控制”专题的开篇之作,聚焦三维声场采集与双耳重放环节,针对传统电影音频采集技术在三维声场捕捉中的局限性,提出基于球麦克风阵列的HOA分析采集技术,并采用球谐域结合虚拟扬声器的方式将HOA信号准确还原为双耳声。通过优化球麦克风阵列设计和头相关传递函数(HRTF)合成算法,减少采集过程中的低频噪声干扰和高频空间混叠现象,提升音频采集与重放的质量与精确度,为HOA技术在电影音频制作与重放领域的应用提供了技术支撑与应用指南,对于推动电影沉浸式音频制作与还音技术的发展具有较高的理论指导意义和实践应用价值。
——徐涛
正高级工程师
中国电影科学技术研究所(中央宣传部电影技术质量检测所)副所长
当前,虚拟摄制是影视制作领域的热点研究方向之一,其后期前置化、所见即所得、虚实融合的制作模式显著提升了影视制作的灵活性与效率。此外,虚拟摄制的应用亦展现出跨领域的拓展趋势,在短视频制作、网络直播、游戏制作、广告拍摄、动漫、沉浸式文旅体验等领域也获得了大量推广应用,展现出巨大发展潜力。虚拟摄制的技术组成可大致分为虚拟场景渲染、摄影机定位追踪、灯光控制、人机交互、LED显示等,而摄影机定位追踪技术一直是电影虚拟摄制的关键,其技术水平的高低,在很大程度上决定了虚拟摄制整体质量的优劣。从十余年前基于绿幕的虚拟摄影开始,到今天的基于LED背景墙的虚拟摄制,电影人不断探索实践新方法和新工艺,改进和优化这一技术,利用最新科技成果,实现更为精准和稳定的摄影机内外参数追踪。《虚拟摄制中镜头和位姿元数据聚合技术应用研究》一文针对虚拟摄制中摄影机定位追踪相关设备稳定性差、易被干扰等问题,提出了一项创新的聚合技术方案,为虚拟摄制现场创制的灵活性与稳定性提供了可靠保障。文章详细论述了摄影机内外参聚合的实现流程,并进行了相关实验与测试,实验结果也直观地展示了该方案在数据稳定性方面的显著提升,展现了其未来的实用价值与创新性。
——陈军
研究员
北京电影学院影视技术系主任
人工智能(AI)的第三次浪潮正以空间智能(Spatial Intelligence)为核心掀起新一轮变革。空间智能即AI在三维空间中感知、推理和行动的能力,其核心在于赋予机器理解物理世界的深度、距离、方位及动态关系,从而在复杂环境中实现自主决策。VR电影作为空间智能技术的重要应用场景,其借助计算机系统及传感器技术生成三维环境,创造出一种崭新的人机交互方式,模拟人的视觉、听觉、触觉等感官功能,使观众沉浸在虚拟境界中。VR电影的全景式立体成像、环绕音响和人景交互,彻底冲破了传统影院的维度,使观众在视觉和听觉上完全浸润于影片内容,为观众带来崭新的沉浸式交互式观影体验。随着空间智能技术的发展与应用,AI技术与VR技术的耦合程度越来越深,未来VR电影将通过复杂运动模拟、多模态数据融合和智能体动态叙事等技术的综合应用,推动其走向更加交互、更加沉浸和更富个性化的影像体验,并持续推动叙事方式和交互模式的革新。《空间智能技术在VR电影空间映射中的应用探索》一文针对VR电影创制中面临的如何在虚拟空间中实现对现实空间的动态映射这一困境,基于空间定位、空间认知和空间涌现的逻辑层级,从实时追踪、多模态映射、三维生成和空间推理等维度,构建VR电影的空间智能技术路径,为VR电影中虚拟空间与现实空间的复杂交互问题提供了解决思路,对相关研究人员具有较高的参考价值。
——潘志庚
教授
南京信息工程大学人工智能学院院长
本期目录
声音采集与控制专题
◎ 基于球麦克风阵列的高阶声场记录与重放在电影音频制作 中的应用
—— 曲天书 吴玺宏
◎ 以配音表演驱动角色设计:动画电影《哪吒之魔童闹海》角色塑造的艺术真实与制作流程
—— 刘 丽
◎ 电影同期录音中演员提示通讯系统的搭建与应用研究
—— 张金岩 王 珏
研究与开发
◎ 虚拟摄制中镜头和位姿元数据聚合技术应用研究
—— 解 沛 周令非 王木旺
技术应用
◎ 空间智能技术在VR电影空间映射中的应用探索
—— 陈焱松 蔡若彤
◎ 人工智能技术在数字资产3D建模和场景生成领域的应用研究
—— 方捷新
视听科技教研
◎ 基于Omniverse Audio2Face的语音驱动数字人三维面部动画生成技术应用研究
—— 苏文吉 鲁梦河
产业发展
◎ 人工智能应用于科幻电影视效工程的系统研究
—— 黄鸣奋 张艾弓 刘晓春
◎ 基于数字水印技术的人工智能生成影视内容标识化管理研究
—— 严 驰
文章概要
基于球麦克风阵列的高阶声场记录与重放在电影音频制作中的应用
【摘要】 随着电影对极致沉浸式视听体验的发展需求,沉浸式声场记录和重放技术日显重要。本文围绕电影音频制作技术中的声场记录和重放问题,介绍了基于球麦克风阵列的高阶高保真立体声(Higher Order Ambisonics, HOA)分析技术,并针对球麦克风阵列球谐分解中的低频噪声与高频混叠问题,以及双耳重放技术中的阶数受限问题,给出了相应解决方案,研究表明所提方案可为观众提供更真实、更具沉浸感的声场重放效果,提升了观影体验,在电影音频制作中具有广阔的应用前景。
以配音表演驱动角色设计:动画电影《哪吒之魔童闹海》角色塑造的艺术真实与制作流程
【摘要】 近年来,国产动画电影在内容创作、制作技术以及工业化流程等方面取得了显著进步,逐渐崛起为全球动画电影产业的重要力量。为深入探讨配音表演在动画电影角色塑造中的作用机制与工作流程,为国产动画电影的进一步发展提供有益借鉴与参考,本文结合媒体对国产动画电影《哪吒之魔童闹海》导演、配音导演和配音演员的采访内容,系统分析了该片如何以配音表演驱动角色塑造,详细剖析了其背后的艺术创作理念与制作流程。研究表明,《哪吒之魔童闹海》采用“先配音后动画”流程,将配音环节从传统后期制作流程前置为角色塑造的核心,有力推动了国产动画电影在角色制作与配音表演方面的革新,重构了角色生命力的生成逻辑,为中国动画电影工业化进程树立了新的标杆。
电影同期录音中演员提示通讯系统的搭建与应用研究
【摘要】 为避免给演员的提示声、音乐声等声音在电影拍摄时对同期录音的干扰,解决特殊拍摄场景下的同期录音和通讯问题,本文分析了不同拍摄场景下演员对提示信号的需求,结合相关实际案例提出用于语音或音乐提示,现场音乐还放与监听、返听,特殊场景录音和通讯三种拍摄现场演员提示通讯系统搭建方案,并进行了应用分析。研究表明,设计科学合理的演员提示通讯系统能显著优化同期录音工艺,减少现场干扰,促进演员表演的自然发挥,为获得优质同期声奠定良好基础。
虚拟摄制中镜头和位姿元数据聚合技术应用研究
【摘要】 近年来,影视制作技术出现巨大的变革与更新,虚拟摄制技术被广泛应用于电影制作。基于目前影视虚拟摄制中存在无法有效整合镜头与位姿元数据,相关设备稳定性差、易被干扰等问题,本文通过对现有摄影机追踪与跟焦设备进行分析,针对不同场景,提出一种虚拟摄制中镜头和位姿元数据聚合技术方案,搭建相关系统并进行了实验与测试。结果表明,本文提出的镜头和位姿元数据聚合技术能够有效聚合输出稳定且平滑的镜头和位姿元数据,为虚拟摄制现场创制的灵活性与稳定性提供可靠保障。
空间智能技术在VR电影空间映射中的应用探索
【摘要】 伴随人工智能技术的持续发展迭代,以空间智能为核心的技术集群逐渐改变虚拟现实(VR)电影中对于现实空间和虚拟空间的双重认知方式,使VR电影创制进入全新阶段。为解决VR电影创制面临的运动映射、身体映射、动态交互映射等空间困境,本文通过对空间智能技术与VR电影间的关系梳理,基于空间定位技术、空间认知技术与空间涌现技术的逻辑层级,从实时追踪技术、多模态映射技术、三维生成技术、空间推理技术等维度,初步构建VR电影的空间智能技术路径,一定程度上解决了VR电影中虚拟空间与现实空间的复杂交互问题,有助于持续推动VR电影创制技术在空间映射中的革新,构筑一个更富沉浸性的虚拟空间环境。
人工智能技术在数字资产3D建模和场景生成领域的应用研究
【摘要】 近年来,在人工智能(AI)技术的发展推动下,3D建模、数字资产构建、地形编辑、场景搭建等工作已积极引入人工智能生成内容(AIGC)工具。本文概述了3D建模和场景生成解决方案,深入研究并对比了AIGC技术在3D建模领域的应用,简述了相关领域开放大模型推出情况,提出了数字资产3D建模和场景生成未来的发展方向。研究表明,当前数字资产3D建模和场景生成已呈现智能化发展趋势,随着相关技术和产品演进升级,AIGC 3D生成大模型将进一步服务3D建模和场景生成相关工作,同时相应数字资产库构建的持续完善,将帮助影视行业利用行业整体优势,解决高质量3D建模和场景生成需求瓶颈。
基于Omniverse Audio2Face的语音驱动数字人三维面部动画生成技术应用研究
【摘要】 为提升数字人三维面部动画的真实感与数字人交互体验,并探索传统高成本面部捕捉技术的替代方案,本文对语音驱动数字人面部动画方法展开研究,基于Omniverse Audio2Face工具,通过语音输入实现对虚幻引擎MetaHuman数字人面部动画的驱动流程。实验评估表明,该方法在精确性和效率上具有一定优势。本文总结了相关使用优化建议,以期为数字人面部动画技术的应用与发展提供参考。
人工智能应用于科幻电影视效工程的系统研究
【摘要】 为开展视效工程科学理论研究,本文运用传播九要素原理,将科幻电影视效工程视为由社会层面、产品层面、运营层面构成的系统,考察当下人工智能技术为繁荣科幻电影发挥的作用,提出人工智能可从九个方面助力视效工程发展。研究表明,科幻电影凭借视效工程突破现实限制,视效工程则通过技术创新推动电影行业变革,二者相辅相成,共同拓展艺术边界,创造震撼体验,并有望在人工智能助力下实现更高效的创作与更个性化的内容呈现。
基于数字水印技术的人工智能生成影视内容标识化管理研究
【摘要】生成式人工智能技术正深刻改变全球影视行业现有格局,其生成的内容在理论和实践层面存在争议。本文从人工智能生成影视内容的版权风险切入,通过对人工智能生成内容(AIGC)标识化管理源起、意义、发展现状及相关规则的梳理,提出借助数字水印技术实现人工智能生成影视内容的标识化管理,并在此基础上进一步探讨了今后加强AIGC标识化管理的可行方案。
文章全文详见《现代电影技术》期刊
2025年第2期