XR虚拟技术为广播电视和网络视听节目制作赋能.pdf

行业报道IndustryXR虚拟技术为广播电视和网络视听节目制作赋能文/索尼（中国）有限公司宋涛随着近年来XR虚拟技术、元宇宙、数字人等新技术日益升温，除了广告片、影视剧拍摄的应用之外，越来越多的传统领域也开始拥抱这些新技术。承担着主要媒体内容的生产和输出任务的广播电视视听领域各级机构，如何与时俱进地应用虚拟现实制作技术来提高生产力、降本增效、提升业务新形态，是近来广播电视和网络视听业界所关注和探讨的问题。2023年9 月，国家广播电视总局组织开展了广播电视和网络视听虚拟现实制作技术应用示范。示范中，鼓励倡导具备条件的企事业单位，开展虚拟现实制作关键技术攻关、重要标准研制、应用场景创新、业务流程示范、研发成果推广等，以形成若干创新联合体，在一定区域内开展技术应用示范，形成虚拟现实制作实验区。该举措旨在推动广电行业虚拟现实生产、传播、呈现产业链快速成熟，促进广播电视和网络视听行业高质量发展。国家层面的推动更加鼓励行业从业者勇敢地去通过拥抱XR扩展现实虚拟制作技术，来畅想视听节目制作的未来。为了更好地将新的技术和创作手段应用到广播电视制作领域，行业内各厂商争先恐后地推出了各种类型的适合广播电视应用的虚拟制作现实产品和解决方案。从虚拟制作演播室在各地电视台落地，到针对LED屏新品及虚拟制作解决方案的推陈出新，越来越多的国内外电视台、媒体机构、厂商充分利用XR虚拟制作技术在广播电视和网络视听节目制作上带来的全新创作理念和手段开展实践和探索。以目前引领业界高端显示质量标杆的针对虚拟制作领域推出的新一代黑彩晶（CLED）屏为例，便是索尼公司整合其在影视制作和视音频领域多年的技术积累和优势，通过多元业务范畴从多个方面为虚拟制作发力的实证。作为全球节目制作领域领先的技术、产品和内容生产者，索尼公司深谱广播电视机构的制作需求，并通过积极的技术创新和产品更新选代来丰富其虚拟制作现实技术在广播电视行业的应用，旨在推给客户的不止是产品，更是涵盖硬件、技术到内容的一整套解决方案。为虚拟制作打造的新一代黑彩晶(CLED)基于持续聆听用户反馈，索尼新一代黑彩晶产品在多方面实现了性能提升。在比较困扰用户的拍摄中LED屏反射问题上，黑彩晶VP系列LED屏采用了全新独特的表面涂层技术，具备优秀的抗反射能力；通过对比演示可知，黑色表现力决定了LED屏在夜晚、太空等场景下的真实度，全新的表面涂层技术让原本就相当出色的黑彩晶VP系列LED屏有更好的黑色表现力；用户关心色彩，新品就支持DCI-P3广色域，还具备高刷新率减少扫描线伪影，最大可达7 6 8 0 Hz用户想要更高的亮度，新品就具备高达150 0 cd/m的高亮度，能充分模拟阳光感，让拍摄画面更真实。新一代黑彩晶产品除了提升性能、降低价格外，还用1:1的箱体设计让安装和维护更方便，用降低2 7%的能耗帮助影棚降低用电成本。更重要的一点，相比上传统LED显示屏*未采用黑色变现和抗反射表面处理技术VP系列与传统LED显示屏技术差异VP系列影视制作41行业报道IIndustry一代产品，以及相比目前市面上其他品牌的LED屏，新款黑彩晶VP系列LED屏更灵活、轻便，摆脱固定安装、粗重的金属绗架束缚，影棚甚至可以为屏幕安装滚轮“移动作业”，以往是制作团队要迁就LED屏，只能在屏幕前有限区域内搭景拍摄，现在是LED屏可以根据导演和摄影师的调度、根据场景需求移动，拍摄更自由，让主创团队的创意有更大发挥空间。全新的黑彩晶VP系列LED屏要比上一代产品采购成本更低，为用户提供了更高性价比的解决方案以及更多的产品组合搭配可能性。从进入虚拟制作领域那一刻起，黑彩晶LED屏就不是孤立存在，它和CineAltaV摄影机、HDR监视器搭配使用，并已经布局在索尼日本、美国、法国和中国的虚拟制作影棚中，通过充分的验证和实践，证明这三大核心硬件产品组合使用可以确保色彩统一，还原出电影摄影机拍摄物体的真实色彩。实时染、动作捕捉、灯光控制协议Art-Net等前沿技术的应用，则让拍摄团队有更沉浸式的、所见即所得的拍摄体验。摄影机与显示屏虚拟制作插件和虚拟制作色彩校准工具随着国内外对虚拟制作技术应用的不断探索，支持完善虚拟制作的各种工具套装应运而生，其中包括索尼的摄影机与显示屏虚拟制作插件和虚拟制作色彩校准工具。使用虚拟色彩校准工具，可以将原本需要耗时数小时的色彩校准工作，压缩至15分钟左右，极大提升现场工作效率。帮助影视工作者改善前期制作效率和现场工作流程，解决制作中的痛点，保持色彩一致性，极大程度地赋能影视制作！摄影机与显示屏虚拟制作插件用户界面42影视制作虚拟制作色彩校准工具片场应用示意摄影机与显示屏虚拟制作插件（“CameraandDisplayPlugin”），是一款安装在UE虚幻引擎中的插件，插件中的虚拟CineAltaV可以让制作人员再现CineAltaV、C in e A lta V 2 和黑彩晶LED屏的设置。使得虚拟美术部门可以在昂贵的剧组进入现场之前，利用CineAltaV的色彩流程在前期制作阶段创建资产。摄影机与显示屏虚拟制作插件中的虚拟CineAltaV功能还可以出色地模拟摄影机的曝光指数和ND滤镜，重现浅景深效果，并帮助制作组在前期制作过程中确定镜头的选择。此插件还可根据LED显示屏的点间距和其他特性，显示相应的摩尔纹警报，帮助制作组在前期制作过程中对摄影机位置和摄影机移动进行调整，以节省拍摄现场的设置时间。另外，用户可以将虚拟CineAltaV与显示屏虚拟制作插件的设置轻松地从插件中导出到现场使用的CineAltaV和CineAltaV2之中。在拍摄期间，该插件可以继续提供摩尔纹警报，识别出现场监控中可能不易察觉、但在后期制作中可能变得明显的问题。虚拟制作色彩校准工具（“ColorCalibrator”），是一款基于Windows10环境的简单易用的应用程序，可以确保在使用CineAltaV拍摄显示屏时，获得贴切的色彩还原。这款校准工具大大减少了在拍摄或制作环节的测试、重拍或复杂LUT的工作。相反，可以更加直观地通过界面校准LED显示屏的效果，包括支持HDR的LED屏，来改善现场工作流程，从而在CineAltaV中实现预期的色彩效果。虚拟制作多讯道切换解决方案通过硬件、软件和内容相结合，索尼打造出了虚行业报道Industry双机位切换画面示意图大时排出国面CAMIFGCAM2FG多讯道解决方案演示现场双机位切换画面示意图拟制作领域独有的“生态系统”，不断推出新的产品、技术、服务，顺应发展，从而更好地为客户服务。索尼虚拟制作多讯道解决方案便是这个“生态系统”中与广播电视应用需求结合的重头。虚拟制作多讯道解决方案是将传统多机位切换和虚拟制作相结合，是虚拟制作在广电节目制作域的拓展应用。虚拟制作多讯道解决方案可以很好地利用电视台已有设备，不改变电视台的操作习惯，将虚拟制作多机位切换嵌入现有的工作流程中，这是索尼虚拟制作方案的一大优势。对应电视直播，目前电视台基本上还是顺序切换不同的机位和镜头方式，它的延时、对应关系，包括操作习惯和目前的电视直播还是有区别的，这个区别有可能使现场的突然变化不能被非常安全准确进行直播。而相比传统多机位顺序切换方案，索尼虚拟制作多讯道切换解决方案除了具备多机位拍摄，保证透视正确、准确的色彩等常规功能外，还能提供监视器多机画面预览、多机同时自由拍摄录制等功能，并且避免切换延迟，给制作带来更大自由度。而且它的工作习惯符合现在电视转播，完全和现有电视转播一模一样，使从编导到准备机位的摄像可充分达到他自己习惯的状态。这是索尼在虚拟制作系统的基础上，利用独特专利技术完成的系统解决方案，能够高质量、高安全性地完成多机位制播。通过支持全域快门功能的系统摄像机，专业切换台和黑彩晶LED屏幕，在直播制作中精准实现多机位切换，进行带有机内VFX的高质量拍摄，该解决方案可广泛应用于访谈、综艺、脱口秀、科教等节目。索尼也是在尝试和探索，用新产品、新技术、新理念去赋能行业用户的制作流程，从而提升效率，减轻节目制作和播出压力，甚至可能会改变节目形态。产品和技术都已经就位，那么我们是否可以畅想虚拟制作在广播电视领域应用的未来？虚拟制作将后期前置的特点，减轻节目制作后期压力，缩短从拍摄到播出的制作周期，让节目更快上线；访谈、综艺、科教等节目，虚拟制作要比传统绿幕抠像品质更高、画质更好、自由度也更大，甚至要做到实时直播也不是没有可能。在短视频抢占市场、低成本直播手段盛行的当下，我们坚信，电视台通过求新、求变，有机会抢占虚拟现实技术赋能广播电视制作的技术应用制高点！影视制作43