资讯
展览资讯 大型展会 灯光节 大型盛典 赛事 中标捷报 产品快讯 热门话题 艺术节 活动 演出 新闻 数艺报道 俱乐部签约
观点
大咖专访 观点洞察 书籍推荐 吐槽 设计观点 企业访谈 问答 趋势创新 论文 职场方法 薪资报价 数艺专访
幕后
幕后故事 团队访谈 经验分享 解密 评测 数艺访谈
干货
设计方案 策划方案 素材资源 教程 文案资源 PPT下载 入门宝典 作品合集 产品手册 电子书 项目对接
  • 0
  • 0
  • 0

分享

人工智能 | 从梵高到克里姆特,倾听天才画布的光影跃动

原创 2022-07-19


在一幅画中,
我想说一些安慰的话,
就像一段音乐。


文森特·梵高




VAN GOGH IN ME
现场媒体表演


6月28日,荷兰国家室内合唱团(Nederlands Kamerkoor)与来自意大利的视听工作室 fuse* 合作的现场媒体表演《Van Gogh in Me》在维也纳音乐厅全球首演


荷兰国家室内合唱团委托意大利视听工作室 fuse* 开发特殊 AI 算法,算法通过梵高和克里姆特的作品进行训练,并从他们的笔触、颜色和绘画风格中学习......



在音乐会期间,这些算法不仅“聆听”合唱团的音乐,还分析歌手、指挥和观众的情绪反应。然后,这些算法使用音乐和情感来控制400万笔虚拟笔触,并实时的转化为图像,以投影的方式呈现在合唱团身后的两个壮观屏幕上。

通过这种方式,图像变得可听,音乐可以在几乎通感的体验中看到。




 梵高 
| GOGH

西方艺术史上最有影响力的艺术家之一。他的作品影响了我们,也影响了他同时代画家的画布,包括古斯塔夫·克里姆特。

他们能够激发灵感,与观察者建立移情、亲密的个人关系。从这里,《Van Gogh in Me》诞生。




 概念 
| CONCEPT

这部现场媒体表演,旨在以通感的方式讲述十九世纪末(1880-1914)的欧洲:萨蒂、德彪西和马勒的时代,梵高和克里姆特的时代。

在演出过程中,多种语言交织在一起:由荷兰国家室内合唱团诠释的音乐,这是两位艺术家艺术旅程发生的视觉平面,然后是技术平面,通过实时数据处理(情感分析)使体验成为表演、音乐会和装置之间的交叉。


结果是一种音乐和图像之间的界限模糊的体验:绘画变得可听,声音被可视化。公众的角色不仅仅是观众,而是与合唱团一起成为作品创作的积极参与者。




 故事情节 
| STORYLINE

梵高和克里姆特的生活不可避免地与他们生活的时间和地点有关。两种不同的视角捕捉了欧洲历史上从19世纪中期到二战的一段时期。

该项目旨在探索两位艺术家的历史背景,以加深对他们生活和作品之间关系的理解。


该剧由15首选同时代作曲家的作品组成:圣桑、德彪西、里尔克、萨蒂、阿尔玛和古斯塔夫·马勒、施特劳斯和肖伯格。

每首歌都通过音乐和歌词营造的氛围,以及由此产生的声音反应视觉处理,讲述和诠释了梵高和克里姆特生活的不同方面。


第一部分主要论述梵高的一生,从狭隘到广阔,从个人到集体,再到普遍的视角:田野漫步,农民肖像,内心的动荡、孤独、绝望。


在中心部分,通过梵高作品的表现力及其对克里姆特艺术的影响,痛苦得以升华。


最后一部分讲述了克里姆特风格的演变,他在第一次世界大战开始时对美的庇护,正如他最令人惊讶的作品之一《贝多芬饰带》所概括的那样。

同样的,音乐也遵循故事的叙事线索,时而亲切甜蜜,时而阴暗不安。




 过程 
| PROCESS

荷兰国家室内合唱团的合唱表演是画作叙述和视觉处理的主角。与声音分量平行,一系列传感器用于检测指挥家、合唱团和大厅内观众的情绪感知,从而影响视觉分量的产生。


合唱团的32名演唱者的声音通过8个全景麦克风检测,返回整体音乐图像。

4位独奏者还佩戴了一个个人麦克风,可以对个人声音进行更深入的声音分析,以及一个 GSR(皮肤电反应)微光传感器,用于实时检测他们的情绪状态(情绪唤醒)。


然后,红外摄像机通过人脸检测收集观众的情绪,并依次从观众的脸上提取情绪分析数据。


最后,指挥代表了观众和合唱团之间的身体和情感联系:从他脸上的表情中衍生出的手势和情感,反过来被分析并插入到这个过程中。


fuse* 使用实时收集的数据集来影响视觉行为并对其进行连续变化。

这些图像像一个活生生的有机体一样进化,在持续的反馈过程中回应观众和合唱团。




 绘画探索 
| PAINTING EXPLORATIONS

fuse* 工作室与阿姆斯特丹梵高博物馆和奥地利丽城画廊的合作,可以处理这些绘画的高分辨率图像。


这使 fuse* 能够在单幅画作上或在多幅作品中反复出现的风格主题的基础上训练神经网络(通过生成对抗网络)

这些细节是对两位艺术家风格和特点的真实探索,揭示了人类肉眼无法察觉的定义和丰富的细节。


—END—

从平面到立体,从视觉到听觉,从流动的旋律到多元化的媒体触碰……《Van Gogh in Me》成为过去和现在之间的桥梁。




参考资料:

https://www.fuseworks.it/works/van-gogh-in-me/
https://www.youtube.com/watch?v=DOYLpy8wpWg
https://www.nederlandskamerkoor.nl/wereldpremiere-van-gogh-in-me/

————


商务合作


19907146972(微信同号)



内容转载


转载请后台获取权限
标注“转载账号”和“文章名称”
并注明出处
image.png
阅读原文

* 文章为作者独立观点,不代表数艺网立场转载须知

本文内容由数艺网收录采集自微信公众号全球数字光影艺术创新网络 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。

数字媒体艺术 新媒体艺术 科技艺术 光影艺术 现场媒体表演

14112 举报
  0
登录| 注册 后参与评论