首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

AI模型SynVAE可由绘画来创作音乐

阿姆斯特丹大学的研究人员创建了一个AI模型,可以由绘画来生成旋律。他们的研究似乎是在验证叔本华的想象。叔本华说,世界是意志的表象,是音乐的梦幻。按照他的说法,每一幅绘画背后都是音乐。

这一AI模型名为“综合变奏自动编码器”(SynVAE),由两个神经网络构成,一个将图像转换为矢量,并为矢量创建旋律,另一个尝试根据产生的音乐对原始绘画进行重构。从测试的情况看,在大约70%的案例中,音乐与绘画的情绪相对应,后者是AI的原始资料。

在视觉形象与音乐的转换方面,这不是第一个项目。提供交感体验的音乐平台Reify曾在几年前推出一个名为Stylus的应用,可分析一首歌的结构、旋律、振幅等,然后将这些数据与高度、重量等关联起来,设计、制作出雕塑。这种雕塑不仅可以摆放观摩,还可以用来播放音乐。

Reify的应用是娱乐性的,而阿姆斯特丹大学的研究要严肃得多。研究人员希望像SynVAE这样的AI能够提供超越感官的艺术访问,例如为盲人创造替代访问。他们还希望在未来将其方法应用于进一步的感觉传递。

【数字叙事 Lighting】

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20190922A08DS000?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券