- 0
- 0
- 0
分享
- 首届AR创作应用大赛—我们竟然中了榜眼!
-
原创 2020-09-07
▲AR交互舞蹈《平行》完整视频(观看时长:5 Min) ▲《平行》 精彩镜头 创作的初衷 在摄影当中,平行(parallel)这一名词可以说是相当基础的概念,同时平行也广泛的发生在我们生活的各个层面。我们为什么会以《平行》命名一个AR舞蹈作品? 增强现实技术(Augmented Reality,简称AR)其实就是将虚拟内容叠加在真实世界的环境之中,并且在这一过程中通过摄像技术的传导能够被人类感官所感知,所以我们的舞蹈最终在咔嚓咔嚓的快门节奏下,实现超越现实的感官体验,达到艺术与技术跨越空间的融合。 ▲《平行》剧照 因为增强现实技术无法离开人对身体的体验而存在,经过多次探讨,我们最终决定借由舞者的运动与身体来组合成作品中所谓真实的空间,通过现场的摄像机与大量实时交互的视觉符号,构建出作品中虚拟维度的空间。 但是,正如同法国哲学家鲍德里亚提出的经典理论——“拟仿物代替了真实,拟仿物生产出拟像”,整个作品通过一个真实与虚拟的混合状态呈现在观众视觉体验当中,那么到底真实与虚拟的界限在哪里?这既是留给观者的一个提问,也是创作者们所需要寻找的自我回答。 前期设计部分 在表现形式上,我们借由了日本新媒体艺术家真锅大度(DAITO MANABE)的经验,不仅是宝贵的视觉参考,也提供了许多工作方法上的启发。 作品采用双人舞的表演形式,并且结合了音画联觉与AR特效。两位舞者根据现场音乐进行即兴表演,表演时长约为3分钟。投射的影像根据现场采集的效果进行AR处理,特效效果依据音乐旋律与舞者运动而产生变化;根据后台切换拍摄视角,最后将计算机计算的AR效果,用投影媒介进行投射。 ▲《平行》早期设计图 在观看两位舞者精彩舞蹈的同时,还可以看到银幕中由摄像机进行实时传输的、融合了增强现实效果的现场画面。在设计过程中,特效与舞蹈动作同步进行设计与编排;工程与舞蹈部分紧密结合、同时推进,从而将概念讨论阶段的成果更好的融入视效设计与舞蹈编排这个两个实际呈现的部分,使得作品内涵更加丰富。 舞蹈设计访谈部分 从整体上看,《平行》的舞蹈结构设计与技术设计紧密呼应。当舞台平面生成一片由音频控制的粒子效果时,这时舞蹈上对应的是两个舞者的位移;当技术实现为“手部”效果时,舞段相应配合定点手部高低、错落有致的舞动;当捕捉到“脸部”效果时,舞者则会呈现脸部的细化表情,使观众集中观看有面部捕捉而实现的实时效果;当舞台生成“拉扯”效果时,配之以两个舞者的对应相向的舞动关系以及大面积大幅度的舞动来呈现。 — 编舞 田湉 特效设计与技术部分: 从技术的角度来看待《平行》,其本身是一个现实增强交互舞蹈项目。通过使用商汤科技开发的 SenseAR 工具及人工智能技术,实现了图像识别与追踪、虚拟摄像机控制功能、人脸识别功能及动作捕捉功能。 在视效内容制作上,我们利用 Unity 提供的 Timeline 工具对不同段落的内容进行编排,控制在特定时刻向外部程序发送的信号等等,在可视化 UI 上可以方便快捷地作出修改。在成品特效制作上,主要用到了 Unity 的 Visual Effect Graph 工具,并使用了 Processing 制作一系列的辅助工具帮助整个工作流更加高效流畅。 ▲现实测试中的场景 ▲游戏引擎中重建的场景 导演 邱寅劼 编导/编舞 田湉 作曲 王熙皓 舞蹈演员 李禹瑶、王宣淇 效果总监 徐楚燕 效果制作 王兆栋 统筹 冯浩祯 美术设计 杨英凡 前期设计 朱星、朱月、李竞榕、张曦丹 特别鸣谢:场地&硬件提供 秀加科技有限公司 特别鸣谢:北京神秘谷数字科技有限公司 B站账号请搜索up主: 新剧元Lab 链接:https://space.bilibili.com/503330522 随时欢迎对工作室以及交互项目感兴趣的小伙伴投递简历 和一群有趣的同事,做一些有趣的项目! 商务合作,简历投递联系邮箱: xjynewmedia@163.com 或直接后台留言,我们会在第一时间进行回复! 扫码关注我们






▲浅井宣通“INORI”系列作品


▲编舞田湉老师在现场指导舞蹈与视效配合
在编舞方面,我们请来了北京舞蹈学院专业导师田湉。在谈及舞蹈设计的整体理念时,双方一拍即合,《平行》要强调的是身体在视觉整体中的“交互性”。身体本就是媒介主体,身体之于整体视觉中的功能。作为舞者的身体,在其中是全身心参与的,拓展了感官的维度,创造了沉浸性体验。
▲针对舞蹈演员脸部的动作捕捉

▲工程师在现场调整视效内容

▲针对舞蹈演员身体的关节点位抓取与视效配合

▲工程师与编舞团队在现场整体调整视效内容




-
阅读原文
* 文章为作者独立观点,不代表数艺网立场转载须知
- 本文内容由数艺网收录采集自微信公众号新剧元工作室 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。





