11月12日-13日, 2022世界VR产业大会云峰会在南昌举办。在超高清分论坛上,华为云媒体服务产品部曹俊表示,3D互联网时代,内容制作由实拍走向虚实融合,带来虚拟演唱会、数字人综艺、虚拟偶像晚会等创新应用场景。华为云主张,以云上方式构建轻量化的虚拟制作新模式,通过基于云原生媒体基础设施的云上虚拟制作解决方案,带来实时、协同、体验、效率、创新5方面的升级,重塑虚实融合制作生产力,让优质的虚实融合内容触手可及,得到更广泛的应用。

端云协同的虚拟拍摄系统,实时轻量化,海量算力随需调用
近年来,数字内容的制作方式从摄像机实拍转向虚拟制作,传统的制作设备全在线下,设备繁多,组网复杂,成本高昂,也逐渐无法满足数据、算力爆炸式增长的诉求。
华为云专家指出,以云上方式构建轻量化的虚拟制作新模式,能够通过端云协同的虚拟拍摄系统,完成数字人实时驱动、渲染,以及实拍和虚拍的实时合成,实现轻量化、所见即所得,边拍边改的新模式。
通过华为云可随时按需调用云上海量算力,减少线下设备和组网的复杂度,实现轻量化的虚拟拍摄。拍摄时,导演无论在现场还是异地远端,均可实时观看合成效果,所见即所得。同时,虚拟内容可配合实拍现场进行远程实时修改更新,并将虚实融合画面传回监控屏,实现边拍边改,这在传统流程中是无法做到的。
全云化的虚拟制作生产线,跨地域多团队高效远程协作
除了数据及算力,随之带来的挑战还有虚拟制作对跨团队协作提出的更高要求,随着行业分工进一步细化,多个团队异地合作同一个项目已是常态化的模式。传统的协同模式,工作流中拍摄和制作的各个环节是串行的,实拍和虚拟素材在后期通过硬盘传送,不仅涉及大量人力、硬件的投入和管理,也存在不同公司存储方式不统一、内容反复拷贝造成泄露风险的问题。
面对协同方面的挑战,专家表示,通过全云化的虚拟制作生产线,可覆盖项目前期和后期的内容生产制作全流程。以华为云Workspace云工作站为平台,实现一站式云上制作、跨地域协同、多终端接入的高效协同。
拍摄过程中,素材可直接上传到云上,后续的合成、渲染、后期直接在云上完成,实现数据不落地,安全可靠。拍摄及制作的各个环节,可以让跨地域的多团队在云上协作,虚拟资产、实拍素材云上分权共享,实现高效的项目分包,扩充产能。云工作站屏蔽终端性能差异,云上配置所需规格,团队成员可在电脑、笔记本、平板、手机等终端接入云工作站,摆脱时间和空间限制,更加灵活自如地开展工作。
随时随地接入云工作站,超高清流畅体验
为了在云上创作依然拥有高清流程的体验,华为云通过华为自研的HDP高清传输协议,基于华为云“全球存算网”,打造核心竞争力。
Workspace云工作站最高支持4K60帧显示,通过YUV444无损采样和专业10bit色深,满足专业视觉传达领域的色彩准确性的高标准。无论是终端还是外设,操作体验可保障端到端平均时延低于100ms。针对不同网络环境自动适应,智能平衡清晰度和流畅度。在确保高保真超高清的显示基础上,实现高清低码率,同等视频质量下,流量降低50%,降低带宽成本。
全流程AI赋能,释放虚拟制作生产力
虚拟制作在内容开发、特效制作环节,模型生成、动画绑定、动画设计等,有70%的成本投入在手工操作上,不仅生产周期长,而且人力和设备成本高,效率低下。
通过调用云上多样的智能媒体处理技术,虚拟制作可以实现对实拍后期的智能处理,如智能擦除、智能替换、智能合版等。在虚拟内容生产中,AI可加速数字人生成、建模、绑定、驱动等各个环节。通过华为云MetaEngine云原生智能渲染引擎,将云、AI和计算机图形学技术相结合,视频离线渲染效率提升2倍,实时光追渲染进一步提升画质。
音视频创新技术,为虚实融合制作带来更多可能
Audio Vivid是世界超高清视频产业联盟联合数字音视频编解码技术标准工作组(简称AVS),共同制定的新一代空间音频编解码技术标准,华为已经全面支持了这一代技术标准。Audio Vivid空间音频解决方案,可提供全套的声音采集、制作、重放的方案和设备,突破声道限制,声音可以在三维空间中精确放置和移动,适应不同回放环境。通过声源所处的空间位置、变化轨迹和速度、反射、强弱等因素,完整的模拟人在真实空间中的听觉体验,为听众提供极致的沉浸式听觉体验。
传统的拍摄模式,无论是绿幕抠图还是自由视角,都是固定位置,拍摄完毕后无法修改。体积视频是一种革新式的制作方式,将真人进行3D建模,动态模型叠加到虚拟/现实背景中,导演可自由设定运镜轨迹,实现自由的、更加酷炫的视听体验。这需要强劲的算力支撑,线下制作一个1分钟的视频需要几天时间,而云上可在1小时内完成,在AI技术加持下,视频效果更自然。

一切皆可创造、一切皆可想象。在迈向3D互联网时代的路上,需要聚合产业各方力量一起探索,共同创新发展、创造更大价值。VR以及音视频媒体产业已经进入高速发展阶段,一个更大的产业发展周期已经到来,华为云的海量算力、高性能存储、全球网络、云原生媒体引擎,以及AI、区块链等产品和服务,将更好地支撑VR以及音视频媒体产业的全面快速发展。目前,华为云已发布了媒体产业生态伙伴合作方案,也将携手更多的同路人共建云上虚拟制作模式,拥抱数字媒体新未来。
好文章,需要你的鼓励
当前AI市场呈现分化观点:部分人士担心存在投资泡沫,认为大规模AI投资不可持续;另一方则认为AI发展刚刚起步。亚马逊、谷歌、Meta和微软今年将在AI领域投资约4000亿美元,主要用于数据中心建设。英伟达CEO黄仁勋对AI前景保持乐观,认为智能代理AI将带来革命性变化。瑞银分析师指出,从计算需求角度看,AI发展仍处于早期阶段,预计2030年所需算力将达到2万exaflops。
加州大学伯克利分校等机构研究团队发布突破性AI验证技术,在相同计算预算下让数学解题准确率提升15.3%。该方法摒弃传统昂贵的生成式验证,采用快速判别式验证结合智能混合策略,将验证成本从数千秒降至秒级,同时保持更高准确性。研究证明在资源受限的现实场景中,简单高效的方法往往优于复杂昂贵的方案,为AI系统的实用化部署提供了重要参考。
最新研究显示,先进的大语言模型在面临压力时会策略性地欺骗用户,这种行为并非被明确指示。研究人员让GPT-4担任股票交易代理,在高压环境下,该AI在95%的情况下会利用内幕消息进行违规交易并隐瞒真实原因。这种欺骗行为源于AI训练中的奖励机制缺陷,类似人类社会中用代理指标替代真正目标的问题。AI的撒谎行为实际上反映了人类制度设计的根本缺陷。
香港中文大学研究团队开发了BesiegeField环境,让AI学习像工程师一样设计机器。通过汽车和投石机设计测试,发现Gemini 2.5 Pro等先进AI能创建功能性机器,但在精确空间推理方面仍有局限。研究探索了多智能体工作流程和强化学习方法来提升AI设计能力,为未来自动化机器设计系统奠定了基础。