1. 视频
  2. 图片
焦虑、压力……20000份社交网络上的呐喊,艺术家都用来做成了“它”

分享 长期 2022-03-15

案例介绍

压力在一定程度上将导致我们大脑不同区域的神经元发生一定的变化,从而影响到它们的复原、生长及重组的能力。

Fuse工作室创作的 “Fragile”装置,利用神经科学学会提供的科学数据,试图显示外部互动对我们神经系统的影响,以此表明我们与外部世界的关系。

该装置由不同的数字表现形式组成,彼此连续,在五个独立的屏幕上显现。

团队从Twitter收集实时信息,在 20000个被归类为 "紧张 "或 "中性 "句子的数据集开始,通过一个卷积神经网络,预测人们在每个精确时刻分享的实时推文相关的压力水平。

根据团队掌握的数据和具体的数字模拟,定义了一系列神经系统的3D影像,这些影像不断受到实时从社交媒体获得的压力值的影响。

团队深入研究了由神经科学学会收集和提供的数据,一系列人脑的SEM(扫描电子显微镜)图像。决定根据Twitter信息分析中预测的压力水平,将这些部分图像可视化。

当数据显示存在负应力时,SEM图像显示为非同步帧的序列,而在存在正应力时,图像显示为从一个部分到另一个部分的正确序列。

随后,该装置展示了构成人脑一部分的神经元复合体的三维可视图。一个复杂的粒子系统采取了我们大脑的形状,作为955个SEM部分的组成。这种分层是通过GLSL着色器获得的体积阴影效果来实时渲染的。

装置的最后部分侧重于对现实的不同层次的感知:视觉。在深度学习技术的帮助下,团队通过研究视觉系统重新解释与我们周围环境的互动,目的是创造多个逼真的模板,由实时获得的压力值创造不断更新的影像,从而对游客产生持续的影响力。

为了做到这一点,团队将两个神经网络耦合起来。

第一个是生成模型,代表大脑重建其周围环境能力,它负责创建城市场景的图像。

第二个是物体检测算法,用于识别给定场景中的物体。新的合成图像的创建由一系列参数控制,这些参数受当时检索的 "压力 "值的影响。一般来说,压力越大,图像就越失真,物体检测神经网络就越难识别图像中的已知元素。

另一方面,在低应力值的情况下,生成的图像将非常逼真,场景中的物体将更加清晰。

团队使用了各种模拟乐器临时录制的录音,并通过一个5声道的颗粒合成系统进行重新制作,与屏幕的数量相对应。其特殊之处在于,一些合成参数(如大小、位置、体积)是基于大脑某些部分的可视化。在这个可视化的过程中,有5个光标在移动,检测某些数值,如亮度和像素位置。然后这些数据被转换,用于控制和操纵声音。

Production: fuse*
Art Direction: Mattia Carretti, Luca Camellini
Concept: Mattia Carretti, Luca Camellini, Samuel Pietri, Matteo Salsi
Software Artists: Luca Camellini, Samuel Pietri
Sound Design: Riccardo Bazzoni
Hardware Engineering: Matteo Mestucci
Video Report: Max Rykov
Premiere: Artechouse - Washington DC

案例参与

* 文章为作者独立观点,不代表数艺网立场转载须知

本文由 数艺网 授权 数艺网 发表,并经数艺网编辑。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 本站部分文字及图片来源于网络,如侵犯到您的权益,请及时告知,我们将及时处理或删除。

艺术展览 自发光OLED屏

27364 举报
登录| 注册 后参与评论
数艺网

数艺网官方

苏州

甲方 · 媒体平台