使用这款基于AI的网络应用程序将任何图像与虚构的音景相匹配

2019-05-14 11:24:43 编辑：来源：

导读声音可以令人惊叹地唤起; 我们远离办公室和家庭，坐在阴凉的森林中潺潺流淌的小溪旁边，或在暴露的山边颤抖。但日本研究人员的一个新项目

声音可以令人惊叹地唤起; 我们远离办公室和家庭，坐在阴凉的森林中潺潺流淌的小溪旁边，或在暴露的山边颤抖。但日本研究人员的一个新项目利用了这种富有想象力的潜力，并将其与人工智能相结合，实现了神奇的效果。由此产生的网络应用程序 - “ Imaginary Soundscape ” - 使用机器学习来匹配您上传的任何图片以及合适的音频配对。

例如，上传日本木刻的渔船，系统提供波浪和水声; 加载夜莺的抽象画，你会得到风铃和鸟儿的花园音景。通常结果正是你所期望的，但更有趣的是当系统选择你可能没有想到的图片中的元素时(比如将威震天与拖拉机声音配对)，或者根本没有任何意义(如这幅画的手与现场体育比赛的声音相匹配)。

一些快速提示：当您上传艺术作品，人类活动照片和抽象图像时，您往往会获得有趣的结果。上传模因只会让机器感到困惑。

所有这些都是相对简单的AI机制的产物。它使用对象识别来识别图像中的元素，然后将这些元素与超过52,000个声音文件的数据集进行匹配。负责的研究人员Yuma Kajihara，Shoya Dozono和Toky的Nao Tokui多年来一直在研究这种“交叉模式”模型。早期版本的Imaginary Soundscapes于1月份推出，用于将音频与Google街景图像进行匹配，您可以阅读Tokui的这篇博文，了解该项目的更多背景知识。(他引用Brian Eno作为灵感。)

这是一个有趣的小应用程序，是AI支持的新型创意表达的绝佳示例。系统并不完美 - 异议识别会产生错误，声音数据库也不可避免地不完整 - 但这是魅力的一部分。如果有的话，它产生的偶然和意外的音景比“正确”的比赛更有趣。请在下面的评论中告诉我们您的配对。

标签：网络应用程序