AI进军B-Box界:输入20秒任意声音,还你一段定制的B-Box演奏

铜灵 编译整理 量子位 出品 | 公众号 QbitAI

最近,B-Box界来了一位新玩家。它不是人类,而是AI。

和人类玩家不同,只要你不打断AI B-Boxer Vid,它就永远不会累。而且它还有一个特殊技能:可以用任何声音合成B-Box。

也就是说,你任意输入几个声音——可能是随口发出的拟声词,也可能只是敲了下桌子,它都会自动处理成B-Box风的演奏。

无论输入的原始声音如何,最后的结果听起来总是像模像样的——

视频内容

在上面这段视频中,主人公拍了拍自己的脸颊,还弹了弹一个塑料瓶。这些声音都被电脑的麦克风记录下来,然后输入至模型生成演奏。

从今以后,你也可以称自己是B-Boxer了,谁让Vid的简化版现在已经开放,可以自己动手录制自己的B-Box了。

只需20秒

德井直生(Nao Tokui)是Vid的创作人,也是九州大学的客座副教授及AI音乐创作初创公司Qosmo的CEO。

德井直生团队开发的这个Neural Beatboxer神经网络系统,只需收集一段20秒的音频,就可以定制出配套的鼓声包,之后自动将输入的声音与鼓声有节奏地排序,一个不会重样的B-Box演奏就出来了。

这项技术中用到了两种模型:先是卷积神经网络模型根据输入声音的声谱图,将里面不同音色分离出来。随后,循环神经网络模型生成创作做,这个模型是在谷歌Magenta预训练模型DrumsRNN改进后得到的。

当谈到自己的技术时,德井直生表示还是以新奇好玩为主。

“从技术上讲,这个项目并不是全新的,并且系统的输出听起来永远不会像巴赫或甲壳虫乐队那样好,”德井直生在接受采访时说,“我的目的是为人类作曲家创作有趣、怪异、新奇的节奏,而这些可能是他们不容易想到的。”

在线生成

想合成你自己的B-Box,可以前往这个地址简单一试(温馨提示:需要用Chrome浏览器打开):

https://codepen.io/teropa/pen/JLjXGK

自己动手,丰衣足食~

作者系网易新闻·网易号“各有态度”签约作者

原文发布于微信公众号 - 量子位(QbitAI)

原文发表时间:2018-08-20

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏达观数据

达观数据推荐系统实践—实时演算用户动态数据 提升运营效率

本文曾在infoq大数据微信群和数据猿直播平台上进行过分享,是对分享内容最直观的表达,同时对推荐系统架构和算法解释的也很详尽。 随着移动互联网技术的迅猛发展、互...

5537
来自专栏AI研习社

Andrej Karpathy谈神经网络:这不仅仅是分类器,这是一种新的软件开发思想

有越来越多的传统编程语言(C、C++、Java)等程序员开始学习机器学习/深度学习,而对机器学习/深度学习的研究人员来说,编程也是必备技巧。那么传统程序员和深度...

3224
来自专栏大数据文摘

利用Python进行深度学习的完整入门指南(附资源)

1886
来自专栏媒矿工厂

视频体验评估标准(uVES1.0)模型及算法解读

视频业务快速发展,已经从强调用户规模走向注重提升服务品质的阶段。消费者对观看体验的要求不断提高,提升视频用户体验质量已经成为视频服务的主要竞争因素。

5200
来自专栏新智元

机器学习理解视频重点,微软视觉智能技术突破

【新智元导读】台湾国立清华大学与微软合作,首次实现了让机器自动生成视频标题。与生成视频描述不同,生成标题需要理解视频内容,抓住重点,用自然语言给出吸引人的概括(...

40914
来自专栏PPV课数据科学社区

【学习】 TensorFlow:最棒的深度学习加速器

TensorFlow没有改变世界。但是,它显然是最棒的,也是现有最便利的深度学习库。本文作者Zachary Chase Lipton是来自加利福尼亚大学计算机科...

2865
来自专栏大数据文摘

自带迷幻剂技能的小贴纸:忽悠神经网络,让它将一切都当作烤面包机!

1793
来自专栏AI科技评论

Andrej Karpathy发文谈神经网络:这不仅仅是分类器,这是一种新的软件开发思想

AI科技评论按:有越来越多的传统编程语言(C、C++、Java)等程序员开始学习机器学习/深度学习,而对机器学习/深度学习的研究人员来说,编程也是必备技巧。那么...

3225
来自专栏PPV课数据科学社区

机器学习项目中常见的误区

在最近的一次报告中,Ben Hamner向我们介绍了他和他的同事在Kaggle比赛中看到的一些机器学习项目的常见误区。 这个报告于2014年2月在Strate举...

3386
来自专栏机器之心

从标题到写作流程:写好一篇论文的十条基本原则

3096

扫码关注云+社区