扩展现实
Extended Reality(xR)

xR是一套以LED屏幕为拍摄背景的影像空间合成技术

应用场景

hecoos xR/VP

  • 01

    影视,广告(xR/ICVFX)

    后期工作前置,用LED屏显示替代大 量实景布置, 显著提升现场拍摄效率

  • 02

    综艺舞台

    丰富多样的立体视觉效果赋能舞台节目演绎

  • 03

    产品发布会

    直观深入的剖析产品特性,配合演讲者给受众留下深刻印象

关键技术点

hecoos xR/VP

  • 摄像机追踪系统

    真实摄像机在世界中的坐标、姿态及镜头变焦数据是一切信号的起点 。 不论是渲染引擎还是AR画面的合成 ,都必须先获取它。同时 ,镜头文件的测量与校准也是整套追踪系统中不可缺少的一环。
  • 实时渲染引擎

    引擎是虚拟画面生成的机器 ,是转化设计师视觉创意的核心工具。在系统中,引擎接收hecoos服务器的渲染指令 ,渲染指定的帧画面 ,并通过 局域网将一帧一帧的画面传递到下一系统流程。
  • LED屏幕背景透视投射

    摄像机的运动 ,使透视点也跟随变动。通过hecoos系统中的透视投射功能 ,可以保证在拍摄时三折幕或弧形幕 (含地屏) 显示内容符合正确的透视画面要求。 同时实现的还有前景、背景、扩展、采集几块画面区域的协同帧同步。
  • “背景”画面扩展

    在拍摄取景范围运动到没有LED屏幕显示的区域时 ,需要通过画面叠加的方 法 ,在采集信号上将场景延展显示到无屏区域。通过hecoos系统的颜色校 准及边缘过度等画面处理技术 ,实现屏内外画面的和谐统一。
XR

hecoosxR/VP主要功能介绍

镜头测量与定位流程

镜头文件测量对摄影机准确定位至关重要,传统的镜头文件需要手动测量,而hecoos xR/VP 系统可以5分钟内通过自动计算完成测量得到镜头数据文件。而摄影机定位是hecoos xR/VP 系统将三维世界的虚拟摄影机与现场真实的摄影机坐标完全对齐,没有丝毫的偏差。

hecoosxR/VP主要功能介绍
  • 延迟校准流程

    LED屏幕的画面与虚拟扩展画面会有一些相对延迟,通过hecoosxR/VP系统测量摄影机延迟、媒体延迟,以及手动调整跟踪延迟,可以让屏幕画面和扩展画面完全同步,不出现卡顿和撕裂等画面瑕疵。
  • 色彩校正流程

    从不同视角观看/拍摄 LED屏幕时会有不同的颜色反馈,由于地面屏幕与立面屏幕安装呈90度,所以必定存在颜色差异。这时我们需要对LED屏幕进行色彩校正。hecoos xR/VP系统通过比较,摄影机拍摄LED屏幕和原始输入的色彩,自动计算校色文件,最终我们就得到与xR扩展内容颜色一致的拍摄画面了,实现拍摄画面与扩展画面的完美融合。
  • 多机位一帧无缝切换

    导播使用与服务器通过无限局域网连接的手持设备,通过操作手持设备可切换多个虚拟相机画面。
  • Unreal Engine关卡/序列管理

    通过向合成服务器的时间线上添加xR节目,将hecoos时间线实时时间码同步到虚幻引擎中。可以选择加载UE工程中的不同关卡,建立连接后,可选择渲染图像在合成画面中的叠加关系。并通过hecoos在虚幻引擎中的插件,选择不同的前景、背景摄像机。可以随时播控/触发虚拟场景中的序列动画,并可以设置绑定触发快捷键。
  • 虚拟与现实灯光联调控制

    通过虚拟世界的灯光配置方案来构建真实影棚的灯光布局。通过软件内ART-NET协议控制功能实现真实灯具的直接控制,通过手持设备可快速修改灯光方向、颜色、发光强度。还可以根据场景剧情需要,制作预设文件,在不同光效设计下快速切换。通过最终合成,可以达到虚拟与现实灯光同步联动。
  • 秒级切换场景

    hecoos xR将内视锥渲染和外视锥渲染解耦,运行Unreal工程即可完成内视锥场景修改并上屏,取消运行即下屏,随心修改,一件文件同步逻辑简单易用。

AIGC+2.5D

拍摄方案

什么是2.5D?

所谓2.5D指将2D与3D资产结合的一种场景资产构建方式,用多层带透明通道的图片/动态场景内容组合表现近、中、远景(多层)不同层次景别的场景元素。在拍摄一些摄影机特定运镜路线的镜头时,相比制作纯3D场景,2.5D的场景制作难度大幅降低且适配原有的三维工作流程。对劳动密集型3D场景搭建的团队来说,是更经济、更高效的替代方案。

摄影机运动过程中不同景别位置关系

什么是2.5D?

AIGC + 2.5D

全面提升虚拟拍摄中的场景搭建效率

将通过AIGC生成的2D场景图片 / 动态场景内容分割解构再重组合成2.5D的分层场景资产进入hecoos xR/VP进行现场拍摄
AIGC  +  2.5D
快

hecoos xR/VP 2.5D拍摄方案用户无论是在前期创意制作还是在摄制过程中,可借助AIGC的内容生成能力快速更改和调整虚拟场景(不完全依赖三维资产团队),在几分钟内由概念形成具体的镜头场景,从而实现更灵活高效、更具成本效益的创作过程。
轻

hecoos xR/VP 2.5D拍摄方案使用图片/动态内容作为拍摄场景,不再依赖3D实时渲染所带来的高额算力需求,对于渲染服务器硬件的要求大大降低(甚至无需渲染服务器)。

案例展示

Check out our latest news & media posts

  • 崩坏3「纯真梦歌」线上音乐会

    2019-06-12

    崩坏3「纯真梦歌」线上音乐会

  • 第七届中国诗词大会

    2019-06-12

    第七届中国诗词大会

  • 2019-06-12

    东方卫视

    朤月东方·月光露营会

联系我们

如果您需要获得虚拟技术的相关支持,请将您的需求发给我们,我们将仔细阅读您的留言,并与您取得联系。