Beyond LIVE 用 Unreal Engine 做的 AR 舞台特效
AR 特效是什么
Beyond LIVE 不做传统直播后期"贴上去"的文字和贴图。它用 Unreal Engine 实时渲染,把 3D 资产(龙、浮空城市、抽象几何图形)和真人艺人的表演画面融合在一起——特效会跟着舞台灯光节奏实时响应,像一个会动的游戏场景。
三种官方 AR 类型
根据 Beyond LIVE Business 官网(beyondlive.co.jp/02bs)公布的资料:
一、Scenic Composition AR(舞台构图 AR)
- 类型:改变整个舞台背景的构图
- 效果:把真实舞台背景替换成 CG 生成的 3D 场景(如未来城市、宇宙、水下世界)
- 应用:演出开场、歌曲切换的转场段落、艺人 solo 段落
官方示意图显示,Scenic Composition AR 可以把原本朴素的舞台背景变成一个完整的 CG 世界。
二、Lyrics Graphics AR(歌词特效 AR)
- 类型:歌词以动态方式"贴"到画面的前景或背景中
- 效果:歌词不是简单的底部字幕——会飞、旋转、放大缩小,配合音乐节奏
- 应用:抒情段落、主打歌高潮、艺人 solo
三、Show Effects AR(演出特效 AR)
- 类型:爆炸、粒子、光束、光剑等特效
- 效果:特效跟艺人动作同步——艺人挥棒 → 光束发射;艺人转圈 → 周围出现粒子环
- 应用:舞蹈高潮、舞台互动、演唱会结尾
技术实现
Beyond LIVE 的 AR 特效技术链路:
- 运动追踪摄像机:舞台周围布置了专门的追踪摄像头,捕捉艺人的骨骼运动轨迹
- Unreal Engine 实时渲染:追踪数据实时传给游戏引擎,引擎按预设逻辑叠加 3D 资产
- 多路流合成:AR 合成后的画面被编码成多路 Multi-View 视频流
- CDN 分发:推到全球边缘节点供实时播放
关键是这一切都是 实时的——不是录播后加上去的。所以 AR 特效可能会因为网络波动出现轻微延迟或丢失(但 Beyond LIVE 的多流同步机制已经把这个概率降到很低)。
AR 对观众的体验影响
| 维度 | 有 AR 特效 | 无 AR 特效 |
|---|---|---|
| 沉浸感 | 艺人好像在一个虚拟世界里唱歌 | 只是看一场直播 |
| 细节丰富度 | 画面层次感强(真人 + CG 背景 + 特效) | 画面只有真人 |
| 互动感 | AR 特效随艺人动作变化 | 静态舞台 |
| 画质要求 | 4K HDR 才能看清 CG 细节 | 1080P 足够 |
不是所有演出都有 AR
AR 特效的制作成本很高(每一条都需要 Unreal Engine 开发),所以不是每场 Beyond LIVE 演出都能做到全 AR:
- 大型家族演唱会(SMTOWN、JYP 家族)通常全 AR
- 热门艺人的独立演唱会(NCT 127、TWICE、aespa 等)主打段落有 AR
- 较小规模演出可能只有部分 Show Effects
以该场演出的 Beyond LIVE 详情页公布的信息为准。