虚拟演播室关键技术的浅识
添加日期:2006-09-26     浏览:797

    [摘要]:虚拟演播室技术正在成为教育技术家族的新成员,本文主要介绍了选用虚拟演播室系统应注意的关键技术方面的问题,对初始化定位、高精度跟踪、三维渲染、色键性能、虚拟大屏幕、虚拟物体等技术特效谈了初浅的认识。

    [关键词]:虚拟演播室技术,初始化定位,跟踪,渲染,色键
紧密跟踪现代信息科技的发展,及时地将高、精、尖科技成果引入教育领域,促进和支持教学改革创新,是众多教育技术工作者敏锐的职业本能和执着的责任感、使命感。近来年,越来越多的教育技术工作者日益关注虚拟演播室技术的发展,探索其在教育领域的应用,热切希望虚拟演播室技术成为教育技术家族中继录音、幻灯、通讯、摄影、电影、电视、多媒体、网络等技术之后的又一新成员,从而更加拓展教育技术工作者的想象力和创造空间,再创技术支持教育的更新更高境界。关于虚拟演播室的技术特性、创造特性和教学特性笔者已有另文探讨,现本文仅针对拟选用和建设虚拟演播室的同行们所关心的问题,谈一些对虚拟演播室关键技术性能的认识和体会。

    1、简便、自适应的瞬间初始化定位
    初始化定位是指摄像机机位架设好后,虚拟摄像机接受物理摄像机机位参数,使虚拟摄像机按照物理摄像机的机位参数定位,并由此启动给予跟踪的一个过程。当一个演播室为多个栏目服务时,摄像机的机位不免要移动,如果初始化定位很繁琐,势必拖延节目制作时间,降低应用效率。因此,选用虚拟演播室系统,应注意和要求其初始化定位不可限定物理摄像机在演播室的摆放位置,不必依赖于第三方参考目标定位,不能限定节目主持人的位置,不需人工测量和计算,能随架随用,迅速快捷,最好一键搞定。要可使多个机位和任意多个节目主持人在任意位置进行瞬间初始化定位,并可同时对所有主持人作正确跟踪。

    2、准确、不打滑的高精度跟踪
    跟踪是考评虚拟演播室的重要指标之一,如果跟踪不好,前景与背景就会产生脱节或停顿,给人以“两张皮”的感觉,失去了虚拟演播室的意义。跟踪方式有多种,常用的有网格识别和光栅旋转编码器、辅助摄像机光图形接力等多种跟踪方式。经比较认为,后一种方式性能较为优越。但不管跟踪方式如何,要求跟踪自由度相互独立,不能“牵一发而动全身”;跟踪要自成系统,它应和前景及色键无关;跟踪必须是物理摄像机对虚拟摄像机间的直接赋值与控制,不要通过中间环节。

    衡量跟踪性能要从精度、灵敏度、频响三个方面着手。对跟踪精度的要求是:任意轴向实际旋转角度与采集处理得到的旋转角度要精确一致;任意方向的位移与采集处理得到的位移值要与物理摄像机一致;物理摄像机的变焦值与虚拟摄像机的变焦值要与物理摄像机一致,跟踪误差不累积。对跟踪灵敏度的要求是:摄像机作任意方向轻微变化时,虚拟场景都要产生相应的变化,反应要灵敏,不能有迟钝现象。对跟踪频响的要求是:摄像机作任意方向快速运动时,虚拟场景要反应快捷,实时。

高精度的跟踪指标应为:① 10m范围内移动,静态误差≤1mm;② 任意角度旋转,静态误差≤0.002°;③ 移动分辨率0.02mm,旋转分辨率0.001°;④ 移动频响1M,旋转频响8M。
    此外还应考虑以下一些要素:① 摄像机机位数目应可扩展,每个机位可自由地对虚拟摄像机进行跟踪,同时可实现对机位前后、左右、上下移动和变焦、平摇、俯仰、旋转等任意运动的高精度跟踪和高速度跟踪;②摄像机在演播室里可360度任意旋转和移动地实现高速度高精度跟踪;③系统跟踪不受舞台灯光、电磁波、声波及热光源的影响;④节目主持人在蓝箱中任意走动时跟踪精度和跟踪速度不受影响;⑤多个主持人同时在蓝箱中活动时,每个主持人均能与虚拟场景保持正确的跟踪关系;⑥多个虚拟大屏幕、多个虚拟物体、多个虚拟特效在跟踪中均能与虚拟演播室、节目主持人保持正确的空间位置关系和空间透视关系;⑦每个摄像机对虚拟场景的跟踪完全独立;⑧经过任意多次的切换,每个摄像机对虚拟场景的跟踪效果丝毫不受影响。

    3、实时、多通道的逼真三维演染
    实时渲染也是考评虚拟演播室的重要指标之一。渲染效果好,场景才能逼真,才能做到以假乱真。具体应考虑:(1)接受通用软件建模,无需任何修改。3D MAX、MAYA等软件已在教育技术工作者手中熟练运用,所以,虚拟演播室应借助于大家已经普遍接受的3D MAX、MAYA等工具建模;(2)网格物体的面数要多达数十万个三角面,只有网格物体面数足够多,贴图纹理量大,才能使场景大气、局部精细,建模无约束,进而满足大幅面、大场景、精细化、多特效和任意发挥的需要;(3)实时渲染速度要快,多机位同时实时渲染应控制在2-4帧的时间内完成;渲染分辨率必须是720×576,并做到同帧场逆程实时切换;(4)渲染后的图像不抖动、不闪烁、不爬行、不撕裂、不拖尾、不模糊;渲染要有足够的过载余量;多通道实时渲染、通道间互锁、信号同时进入特技台,实现特技过程中图像不跳、不抖、不静帧;(5)色彩位数不能低于256色;(6)必须保证广播级技术指标;可以接受外同步信号,严格做到50场/秒输出;设备内部和外部都必须采用YUV或SDI信号格式,以保证广播级的图像质量;(7)实时地将数据赋值给虚拟摄像机的跟踪、动态无限蓝箱、景深识别系统;(8)设备在长期连续运行过程中无丢帧、无黑场现象;(9)可在复杂场景下实现动态阴影、全场雾化、动态灯光、多路活动外视频和动画等计算量繁重的功能;(10)系统软件与硬件无关,随着硬件升级换代,系统演染能力自动增强。

    4、灯光、蓝箱无需荷求的高指标色键性能
    色键是虚拟演播室的重要设备,要保证扣像的人和物体色彩逼真,好的色键器是关键。从性能上讲,色键应对灯光布光无苛刻要求,对蓝箱和蓝箱的光照均匀度无苛刻要求;要保证同一参数下能同时色键出头发、阴影、半透明体、亮蓝色、烟雾、自然柔和的轮廓边缘和正确的肤色还原;色键要具有自动蓝背景识别功能;色键还要具有操作存储和记忆功能,保证在灯光参数不变的情况下开机就能工作;色键要便于使用和操作,要能对α、前景和背景分别进行调节。

    从技术上讲,(1)色键必须具有YUV或SDI信号接口并使用YUV或SDI信号,而不能使用复合或Y/C接口,只有YUV或SDI信号传输才能保证广播级信号质量;(2)色键要能对前景的HSL和RGB进行控制;(3)色键的α必须灰度等级连续可调;(4)色键必须能分别对前景的白、灰和黑区分别作透明度处理和色相位调整;(5)色键必须能分别对红区和绿区分别作色相位和透明度处理;(6)对整个前景、整个背景能作亮度、对比度和色相位处理;
(7)色键调整应与跟踪无关。

    此外还应注意:(1)色键的键控电平、暗色调相位、亮色调相位、边沿轮廓的自然过渡、红、绿、蓝分量值的强弱均可在线调整,且有较大的动态范围;(2)每个机位在每个通道均有独立的动态无限蓝箱参数;(3)主持人在蓝箱中任意走动,无需灯光跟踪,均有很好的色键效果;(4)不同颜色服饰的多个主持人在蓝箱中同时活动时,每个主持人的服饰均能实现正确的色彩还原。

    5、方便实用的虚拟大屏幕播放
    虚拟大屏幕的灵活应用,是虚拟演播室优于传统演播室的又一亮点,且使用率较高。因此应特别要求:(1)虚拟演播室中可指定任意物体表面播放外视频和动画,多个表面能同时播放多路不同的活动外视频和动画,视频信号端口支持SDI、YUV、Y/C和复合等多种格式中的任意一种;(2)多路活动外视频和多个动画间可进行实时的无缝切换,切换时不延时、不跳跃、无黑场和撕裂现象;(3)可按时间序列对硬盘上的视频文件、图片文件和多路活动外视频进行任意顺序和任意时间长度的手动控制和自动组合播放;(4)播放内容在任意时刻能进行暂停、重启动和切换操作,并且操作中无黑场、抖动或撕裂现象;(5)在进行手动播放操作时,每一段视频画面的长度能自动与节目主持人的解说词长度相匹配;(6)对物体表面播放的视频、动画、图片内容可进行所见即所得的在线拾取、编辑、预览和实时播出;(7)对播放视频物体缩放比例、移动位置、旋转角度等动态DVE效果不作任何限制。

    6、真实自然、神奇变幻的虚拟物体和特效物体
    虚拟物体和特殊物体是教学演示中最富于想象力和创造力的实用、多用功能,也应注意以下几点:(1)场景中可放入多个虚拟物体、虚拟特效和虚拟灯光,每个虚拟物体、虚拟特效和虚拟灯光均可实时地进行缩放和旋转,可沿任意复杂的曲线轨迹作空间运动;(2)每个虚拟物体和虚拟特效均有自身的空间位置参数、空间姿态参数和空间缩放参数;(3)每个虚拟物体和虚拟特效均可支持所见即所得的在线拾取、预览和编辑,一旦完成对关键帧的编辑,不需生成等待,即可实时播放;(4)对每个虚拟物体和特效均可设置其位移、旋转、缩放、淡入/淡出和显示/隐藏等动画效果;(5)虚拟灯光可为泛光和聚光灯等类型。灯光的位置、方向、范围、过渡区域、亮度、颜色均可在线编辑、手动和自动播放;(6)系统具有实时动态阴影,每盏虚拟灯光可对多个虚拟物体产生阴影,每个虚拟物体的阴影可由指定的虚拟灯光实时产生;(7)阴影的透明度、色彩和亮度均可进行实时调整和动画播出;(8)阴影的大小、方向和位置完全由物体和光源的相对位置关系确定,真实自然;(9)可对全场景进行雾化处理,雾化的浓度、范围、色彩强度均可实时调整和动画播出;(10)每个虚拟物体、特效物体在执行自身动画的同时可服从摄像机的跟踪控制,也可不服从摄像机的跟踪控制,以其成为动画标识;(11)虚拟物体和虚拟特效可接受手动和自动动画播放;(12)虚拟物体和虚拟特效生成和导入工具通用,导入方法简单,调整和编辑方便直观。

    7、其它方面的技术要求
    除了对以上关键技术的认识外,在日常使用和日后升级、维护等方面还有以下方面需要考虑:
    虚拟演播室工作起来实时性很强,而一套虚拟演播室系统可能由多台计算机组成,计算机界面最好集中控制,共用一套鼠标、键盘,这样不仅可以减少操作人员,也可防止或减少操作人员的误操作。

虚拟演播室在导入网格物体、贴图、动画、特效等素材时要方便、快捷,分类清晰,并可随时调用和更换;在线拾取和编辑时,要能做到直观方便、实时。

    虚拟演播室的操作界面上可多个场景实现同屏实时渲染,场景可实现任意组合;渲染应采用与3D MAX风格一致的四视图界面,图标、功能一目了然,顺应操作人员的习惯;将动作和事件按统一的时轨逻辑排序,可以方便操作;系统拥有多达100次的重复(Redo)和撤销(Undo)功能,以便于对操作进行修改;对节目制作可提前设计、编辑和调试,以文件形式存储,便于拍摄时随时调用;设置手动和自动播出单播和组播的控制键,以供操作人员选择;场景、虚拟物体、虚拟特效、灯光、雾化、外视频、动画文件、图片文件均相互独立,可随时进行积木式组合,方便地实现二次再创作;所有物体和事件只需在关键帧上进行可视化编辑、一旦编辑完成,过程帧自动实时生成,无需任何等待;系统具有播出时可进行实时编辑功能,编辑时也可进行实时播放功能;系统设计符合广播电视节目创作操作规范,界面简洁,功能一目了然,很短时间内即可学会操作;可对编辑进行保存,并可在编辑过程中合并加载已有的文件;系统采用CS结构设计,任意配置下,只需一套鼠标键盘,在一个操作界面下进行操作和编辑;静态场景与动态场景并存,对动态场景可任意编辑。

    硬件配置档次高、易于升级换代、可靠性高。专用图形图像工作站、正版操作系统,可靠性与稳定性高;专用图形、图像处理板卡与设备,内部处理与外部输入、输出一致的YUV与SDI信号格式,图像质量高;程序设计、系统硬件配置、虚拟节目创作方式均模块化,使节目再创作性强,软硬件升级换代方便可靠;双通道互为热备份,每个通道均可独立地支持三个机位,即使一个通道出现故障,也不影响系统的正常工作,使实况播出的可靠性大大增加;控制线、数据线、视频线和同步线均可热插拔,摄像机可热更换,输出端设备可热更换,外视频源可热更换;只要工作站不断电,其它设备即使掉电,再开启也不会使系统死机;系统长期连续运行不死机。

    广泛的兼容性:不需作任何改造可与现有的任何摄像机配套使用;信号可直接送至非线编、录像机、特技切换台或网络设备;对原有演播室只需作蓝箱布置,无需对灯光作苛刻的要求,无需对环境进行任何改造就可使用虚拟演播室;输入的外视频可以是任何格式的录像机、摄像机、影碟机的视频源,无需锁相即可在大屏幕中播出;系统可与任何类型的外置式色键、任何的延时器、任何切换器、任何机位移动跟踪方式的外设等联机工作;系统可对任何放像机、录像机、切换台的RS-422或RS-232接口进行程序控制;系统可以是内同步方式工作,也可以接受外同步方式工作。

    [参考文献]

    [1] 洪炳?F. 虚拟现实及其应用[M]. 北京:国防工业出版社,2005.
    [2] 胡小强. 虚拟现实技术[M]. 北京:邮电大学出版社,2005.
    [3] 方德葵. 虚拟大学 ── 现代“远程教育理论与实践”[M].
    北京:中国广播电视出版社,2003.


    作者简介:李冰(1958-),男,第四军医大学教育技术中心教授
              安川林(1965-),男,第四军医大学教育技术中心高级工程师
              王文军(1981-)男,第四军医大学教育技术中心助工


    英文标题:
    Comprehension of Key Technology of Virtual Studio
Li Bing  An Chuan Lin  Wang Wen Jun