了解公司
disguise 专访 I “烎”·腾讯潮音发布夜的 AR 团队
disguise 专访 I “烎”·腾讯潮音发布夜的 AR 团队

在南京停留不到 2 天,腾讯 “烎” 潮音发布夜 三位 AR 团队的时间几乎是被我们“抢夺”的。


13号刚完成整场演出的 AR 视效工作,不到 12 小时,在三位 AR 界的大神搭机离开之前,我们一起聊了聊这场大派对的幕后故事,以及 disguise 产品在他们的工作中所扮演的 “角色”。


Michael AL-FAR


Malfedia 公司创始人,顶尖设计创意制作人。


Maarten Francq


3D 视效、运动、设计方面及全景显示技术专家,

disguise 海外认证培训师。




去年开启的腾讯 “烎” 潮音发布夜,已经变成潮流音乐汇集的平台。除了展现最前沿的文化,也是最尖端的视效科技一展身手的舞台。


而今年的潮音发布夜则着眼于新媒体艺术,试图以一种科技感十足的方式,将潮流文化的元素与 AR 技术相融合,从而塑造出更酷更迷人的舞台效果。


尤其是王源的《孤注》当中飘荡散落的水晶,


以及引爆全场,“阅后即焚”中的那场漫天大火,


这些令人惊叹 AR 效果,便是出自 Micheal 团队的手笔,并交由 3 台 disguise 设备—— gx2 完成 AR 效果的呈现。


“这个市场上有那么多的表演,如何让人们在你的秀场中更享受更投入,AR 就是唯一的答案。”



 以下内容整理自 

disguise 与潮音发布夜 AR 团队的对谈。

❶ 


 - 与以往的不同之处 - 


在接手项目之后,您们感到在这次的 AR 设计与编排的过程中,有没有与以往完全不同的地方?


腾讯这次的秀,旨在激励年轻人走出家门,走向世界,做出改变。


也因此,我们也在技术上决定迈出一步。我们第一次将 disguise 的产品与 Notch 软件结合在一起,在一台现场直播演出的舞台上,完成一次现实增强的展现。




您刚提到 disguise 与 Notch 相互配合才顺利实现了预期效果。是基于怎样的考量,才使得您们最终决定采用这种的系统结构?


这次 AR 的设计方案,除了需要实时渲染技术,还必须运用相机追踪(camera tracking)技术进行相互配合才能实现。


Notch 允许我们将两者结合起来,并且通过它,我们甚至可以将支持相机追踪技术的视觉效果集中起来,组合出一个庞大的效果目录,便于调取。


由 Notch 生成的文件能让我们的工作变得相当简便,更妙的是~只有在 disguise 的设备上,我们能够通过时间线,对很多个 Notch 文件进行修改、编辑排序,而不必进行重复渲染,这种体验简直太棒了!


同时,我们这次选择的媒体服务器,是 disguise gx2。除了因为 Notch 模块能够方便的嵌入其中,还因为 gx2 真的很强大,说它是目前市面上性能最强大的服务器也不为过。视效处理、相机追踪和实时渲染的工作,我们用一台 gx2 就统统搞定了。



据我们所知,这次的项目当中还运用了 Notch VFX 和 OB 摄像机的交互,这种做法是出于稳定还是传输速度方面的考虑?另外在这个系统结构中,您们还用到了哪些设备?


兼而有之。Notch VFX 能用一种聪明的方式来对模块进行编译,并将编译之后的模块嵌入进 disguise 的媒体服务器里。这样让我们不仅能够节约硬件数量,并且极大的改善了之后的验证和工作流程。


我们三人分工明确:


我负责整体的 AR 设计工作,Hans 和 Maarten 具体负责集成和编程方面的工作。


他们使用了一个由 MIDI 和 OSC 控件组成的智能系统,用来对关键帧时间线以及设计中的其他元素进行现场实时控制,比如:水晶体的透明度、火焰的速度和敏捷度。


他们可以通过连接在通信线路中的 disguise 设备,对设计进行实时干预。




 - 创新与挑战 - 



除此之外,在这次项目里,还有哪些细节是创新性的?


在 《孤注》这个单元里,我们将实时反射效果集成进了那些水晶当中,这样不但增强了 AR 效果,与真实环境之间也完成了无缝衔接。

左侧:舞台实时画面;
右侧:AR 效果画面。


另一个亮点,就是我们成功地在舞台上点了一把“火”。你看到的那团用 AR 技术制造出的火焰,是由超过 1,000,000 颗的粒子运行而成。


我们让每一个粒子都以一个穩定的帧速进行高速运转,这样才使得现场的相机,能够平滑地对整场火焰进行追踪和拍摄。


左侧:舞台实时画面;
右侧:AR 效果画面。


您们刚提到,这次设计得以实现,是运用了许多创新的技术。而创新的背后也往往伴随这风险,您们这次遇到最大的挑战是什么?


这是个很好的问题。这次最大的挑战是如何让视频端和现场观众一样,都得到最好的观感体验?


例如,我们设计了水晶散落的场景,让水晶碎片围绕在歌手王源四周。和以往的现场演出不同,我们需要花极大的精力,和现场摄像师进行沟通,确保他们能和我们一样了解整个设计以及故事线脉络,以免遗漏重要的画面。


我们需要让摄影师们知道,


这一刻,你们就是观众的“眼睛”!


只有用你们的全神贯注,才能让这个舞台设计中的细节,完完整整地呈现给无数的观众。


 散落的水晶碎片是设计中的细节元素,而要展示全部创意,则需要了解全部的设计思路,理顺整个故事线的脉络。




 - 要成为人才,

特别是要成为这个领域里的全才- 


我们知道,您们是使用 disguise 产品的专家,拥有丰富的项目经验。在这么长时间的相处之后,您们如何评价 disguise 在您们工作上所发挥的作用?


非常好。对于像我们这样的设计师来说,disguise 设备简直就是为了视觉设计和播控而生的!它的表现真的非常非常好,无论何种类型或者多大画幅的视频播放工作,disguise 的设备都可以胜任。


不单单能用于视频和投影的线性播放,disguise 的媒体服务器甚至成功地帮助我们实现了相机追踪的操作。


这种体验,犹如一场令人兴奋的冒险之旅,而我们始终站在它的最前沿。


正因如此,去年我们赢得了与欧洲体育组织的合作机会,参与了平昌冬季奥运会的项目,以及打造了去年 IBC 大会(全球领先的媒体、娱乐和技术展会)上的亮点项目 “混合现实技术实验室”。


所以在这一领域,我们始终是和 disguise 携手同行,并会在将来,共同获得更大的成功。


现在中国创意产业的发展速度惊人,大量的行业新人都开始进入这个市场,作为前辈,您们有什么建议给他们么?


要成为人才,特别是要成为这个领域里的全才!


我们发现,目前中国市场中的分工细化,通晓某个方向上的专才很多。比如设计师和现场操控师,他们通常只精通各自领域内的专业知识,当有某个项目,有需要他们协同才能完成时,往往彼此沟通不畅,经常使得后台的指令,还没到达目标便已经“拷贝走样”,更何况这次他们遇到的还是三个外国人。


Maarten 在我们团队里,是将我的设计带出图纸,展现在观众面前的关键人物。同时,他也是一名 disguise 官方认证的培训师,他培养出了许多活跃在欧洲创意市场的年轻设计师。


所以要成为这个行业需要的人才,首先在学习 disguise 相关知识之初,你便要常怀热情,明确目标,从一次次实践的失败中学习宝贵的经验。


找到合适的引路人,确保每个步骤都毫无偏差。 


我们听说 disguise 在中国地区也开启了同样的培训项目,这非常好,我们很期待通过这一项目,使得中国市场中涌现越来越多的全才。这样也能让我们之后与中国的合作方协作的更加顺畅,给中国的观众带来更多震撼的视效体验。


 潮音发布夜 AR 团队——Micheal、Hans、Maarten 与 disguise 亚太区市场团队。






qrcode