资讯
展览资讯 大型展会 灯光节 大型盛典 赛事 中标捷报 产品快讯 热门话题 艺术节 活动 演出 新闻 数艺报道 俱乐部签约
观点
大咖专访 观点洞察 书籍推荐 吐槽 设计观点 企业访谈 问答 趋势创新 论文 职场方法 薪资报价 数艺专访
幕后
幕后故事 团队访谈 经验分享 解密 评测 数艺访谈
干货
设计方案 策划方案 素材资源 教程 文案资源 PPT下载 入门宝典 作品合集 产品手册 电子书 项目对接
  • 0
  • 0
  • 0

分享

人工智能驱动的在线Beatboxing演奏

2021-04-22


Human Beatbox,口语常称为Beatbox,是一种人声敲击乐的艺术,利用嘴巴去模仿出有节奏、韵律的敲击乐效果,经常出现在嘻哈文化里。自1980年代兴起,1990年代末因为饶舌文化而复兴,乐手在即兴表演时若无乐器在旁,节奏口技就大派用场。节奏口技慢慢演变成一种独立音乐艺术及文化。


下面让我们来欣赏一段Berywam这个团队在美国达人秀中的精彩Beatbox演出。



America's Got Talent 2019


听完之后小编也跃跃欲试,但是一张嘴就发现嘴仿佛不受控制......心有余而力不足。


专业的表演者做起来看似轻松,但实际上都是无数次的台下练习才能在表演时游刃有余,我们这些业余玩家的尝试结果大概就是如下视频这样。



简直完美再现了不会Beatbox的小编的笨嘴拙舌。



但是不用慌,能力不够技术来凑。借助科技的帮忙,人人都能Beatbox大师。



■ 在线Beatboxing生成器


Neural Beatbox是一个AI模型网站,人工智能在其中分析用户使用网络摄像头录制的声音和拍手动作,从而生成新的节奏。该网站允许在线多个用户和AI系统之间进行协作,完成属于你自己的Beatbox作品。





■ 怎么玩?


演奏方式很简单,例如,用自己的声音、鼓掌,或者演奏和敲击声录制声音,例如演奏乐器或在桌上使用笔和杯子。然后AI系统分析会它们并生成节拍。用户可以随意添加声音。不仅可以在AI产生新节奏的同时体验新节奏,而且还可以通过共享会话链接来实时与好友在线玩耍。它还能够应用视频功能,使用户可以在录制时欣赏他们的表情。而实现这一切只需要一个电脑就足以完成。


第一步:录音

第二步:生成

第三步:Remix(与朋友合奏)



■ 生成原理


声音分类:继续处理声音文件(由用户录制),将它们划分为有意义的片段,然后使用神经网络分类器将其分类为八种可能的鼓类(例如“敲打声”,“小鼓声”,“拍手声”,等等)。



节奏序列的产生:生成将要播放的节拍——鼓模式序列。此生成部分也是经过训练的神经网络-VariationalAutoencoder(VAE)产生的结果,它还涉及了一些其他的过程,这些过程使我们可以更好地控制选择顺序:例如,可以对每个鼓进行加权,在当前上下文中更改,加入具有更多相关项的节拍(例如,如果用户记录了一个鼓掌声,我们将要根据鼓掌声的节奏来更新拍子)。客户端作为Web应用程序运行,并利用了浏览器提供的现代功能:媒体记录API,高级图形等。

这使得该应用程序可以用最少的配置从任何现代机器上进行访问。




适用于多人参与的Neural Beatbox演奏


Neural Beatbox网站充满活力的设计与AI程序有趣的体验相匹配。每一个生成的节拍都使用了基于该特定序列中使用的鼓点而生成的动态设计。有三个可用的颜色主题,每次进入会话时都可选择不同的颜色突出显示,尝试在当前节奏中创建互动的视觉感。


下面就让我们一起看看大家的作品吧~




■ 小编结语


通过交互式设计原理,这种视听装置使用户与AI系统之间进行协作。AI系统配合完成作品,而作品本身的内容仅来自我们自己制造的声音和动作,与节拍产生共鸣,在节拍中将乐器从方程式中删除,以强调个人的创造潜力。在这里,AI成为我们的辅助工具和推动器。这样的协作方式增加了令人惊讶和新颖的创意元素。


大家看了有没有很感兴趣呢?

点击这里复制网址👉https://neuralbeatbox.net/,赶快和小伙伴们一起来创造属于你们的beatbox作品吧!





 



第二十四届日本媒体艺术祭获奖作品大赏

离解锁超能力只差一个AR,你能成为钢铁侠吗?

去霍格沃滋 VS 成为神奇宝贝训练师







:Neve

Wen.W

 



https://www.youtube.com/watch?v=gYeQ2pDAysI

https://www.youtube.com/watch?v=qcblzukoJqA

https://medium.com/qosmo-lab/ai-powered-online-beatboxing-experiment-1c669a1ad897


阅读原文

* 文章为作者独立观点,不代表数艺网立场转载须知

本文内容由数艺网收录采集自微信公众号OF COURSE想当然 ,并经数艺网进行了排版优化。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 如您不希望被数艺网所收录,感觉到侵犯到了您的权益,请及时告知数艺网,我们表示诚挚的歉意,并及时处理或删除。

人工智能

17546 举报
  0
登录| 注册 后参与评论