爱吧机器人网 » 专题 > 应用 > 正文

MIT又一突破!用AI过滤音源 让音乐更悦耳

核心提示:一般利用均衡器可以将音乐中的低音部分调出来,但是麻省理工学院的计算机科学和人工智能实验室(Computer Science and Artificial Intelligence Lab,CSAIL)的研究人员发现了更好的解决方案。他们所研

MIT又一突破!用AI过滤音源,让音乐更悦耳
【猎云网(微信号:)】7月9日报道(编译:杨卟咚)

一般利用均衡器可以将音乐中的低音部分调出来,但是麻省理工学院的计算机科学和人工智能实验室(Computer Science and Artificial Intelligence Lab,CSAIL)的研究人员发现了更好的解决方案。他们所研发的新系统 PixelPlayer,能够利用人工智能来区分和过滤声音,让音乐听起来更洪亮或更柔和。

将指定视频录入经过充分训练的 PixelPlayer,系统随机能够过滤伴奏,同时识别音源,接着计算图像中每个像素的音量,然后通过“空间定位”确定产生相似音波的片段。

今年9月,德国慕尼黑即将举行欧洲计算机视觉会议(European Conference on Computer Vision),会议中要发表的一篇新论文则详细论述了“像素的声音(The Sound of Pixels)”。麻省理工学院计算机科学和人工智能实验室的博士生,同时也是这篇论文的合著者 Zhao Hang 同学表示,“最好的情况就是,我们能识别出哪种乐器发出怎样的声音。”

MIT又一突破!用AI过滤音源,让音乐更悦耳
PixelPlayer 的核心是一种基于乐器组合多模态训练的神经网络,数据集采用了 Youtube 上 714 条未经修剪且未经标记的视频。其中,总时长为 60 小时的 500 条视频用于训练,剩余的则用于验证和测试。在训练过程中,研究人员分别根据原声吉他、大提琴、单簧管、长笛和其他乐器向系统馈入了算法。

这只是 PixelPlayer 多重机器学习框架的一个部分。经过训练后的视频分析算法将从剪辑帧中提取出视觉特征,这就是系统的第二个神经网络,即音频分析网络。音频分析网络将声音拆分为片段,并从中提取特征。最后,音频合成网络将把上述两个网络输出的特定像素和声波关联起来。

PixelPlayer 进行完全自监督的学习,人们无需对数据注释,而且系统目前已经能识别 20 种乐器。Zhao Hang 说,较大的数据集增强了系统的识别量,但识别乐器子类的能力却不佳。系统也可以识别音乐元素,例如小提琴的谐波频率。

研究人员认为 PixelPlayer 可以进行声音剪辑,或者帮助机器人理解动物、车辆和其他物体所制造的环境声音。他们写到,“我们希望我们的工作能够开辟新的研究途径,从视觉和听觉信号角度实现声源分离”。

上一篇:新专利 Affectiva利用AI解决疲劳驾驶
下一篇:人工智能新用途 AI可预测放射性物质扩散

本周栏目热点

日本机器人酒店推出“无人酒吧” 颇为人气

[2017-11-10]  现在最流行的服务并非是人类的服务,现在最流行的服务也并非就是贴心的服务,现在最流行的服务,是使用最新的人工智能机器人来服务...

两会焦点:机器人能帮孩子减少无效学习时间

[2018-03-12]  在3月11日下午的全国两会第三场代表通道上,科大讯飞董事长刘庆峰在回答记者提问时强调,他们的软件给孩子们节省了时间,让孩子们有更多的...

私人助理or玩伴?社交机器人纳丁帮你搞定

[2016-03-09]     纳丁有着细嫩的皮肤和柔顺的深褐色头发,面部表情丰富,并且可以记得以前的 ...

 深圳交通已经有人工智能AI?云+人工智能前景太美好

[2018-06-26]  在6月26日华为云中国行深圳站现场,华为云计算首次对外公布了其全新智能体概念并结合具体实践行业做以解释。何谓智能体,华为云郑叶来给出 ...

[2018-03-12]  机器人医生为你看病、做手术不是科幻片,而是纪录片。科技部部长万钢3月10日在出席十三届全国人大一次会议记者会时表示,我国科技人员研发的手术机器人,医疗设备进入了高端医......

用AI预测自来水管网水质,这篇论文登上国际会议

[2018-07-18]  日前,人工智能领域国际顶级学术会议IJCAI2018(国际人工智能联合会议)在瑞典首都斯德哥尔摩召开,京东金融城市计算事业部的一篇“基于大数据的管网水质预测”论文被会议录用......

DeltaGrad股票机器人业绩跑赢大盘 基金经理要下岗?

[2018-07-16]  一家来自中国的技术公司DeltaGrad研发的A股AI投资机器人今年以来的投资业绩着实亮眼。从2017年11月开始实盘测试以来,截至2018年7月2日,DeltaGrad的股票机器人业绩累积为收益8 1%...

[2018-07-17]  要说今年来什么高新技术方向最为流行,恐怕非人工智能技术莫属,人工智能技术给各行各业带来了巨大的改变,现在连最古老的酿酒行业也要用上 ...

为智能制造“点睛” 揭秘机器视觉如何成为制造业发展重要推动力

[2018-07-16]  在当前以高端装备制造为核心的智造工业4 0时代背景下,随着“中国制造2025”战略的深入,业智能机器人产业市场呈现不断增长的势头,其中充 ...

[2018-07-17]  据新华社华盛顿电 美国斯坦福大学一个研究团队开发出一种新的人工智能系统,可预测两种药物组合使用的潜在副作用。这项研究成果不仅可帮助 ...

精选推荐

比利时研发出可以自我愈合伤口的软体机器人
比利时研发出可以自我愈合伤口的软体机器人

[2017-09-03]  软体机器人是机器人技术的新兴领域; 他们“可以与人类相互作用,而不会杀死他们,并拿起像西红柿这样柔软的物体。” 从长远来看,布鲁塞尔大学队伍正在努力创建一个类似的材......

2022年全球工业机器人市场将达到790亿美元
2022年全球工业机器人市场将达到790亿美元

[2017-09-04]  预计到 2022年, 全球工业机器人市场将达到790亿美元, 并在预测期内登记11 5% 的复合年增长率。随着发展中国家中小型企业需求的不断增长, 采用自动化技术以确保生产质量......

担心机器换人?自1950年以来只有一个职业被机器彻底取代

[2017-03-21]  虽然有很多关于机器人取代工人的担心,但哈佛经济学家James Bessen的论文指出,在过去的67年里机器人仅仅淘汰掉人类工作中的一个。在1950 ...

机器人工程师具体都做什么?
机器人工程师具体都做什么?

[2017-12-08]  机器人工程师是幕后设计师,负责创建机器人和机器人系统,能够执行人类无法完成或不愿意完成的任务。 通过他们的创造,机器人工程师帮助工作更安全,更轻松,更高效,特别是......

人工神经网络技术解码人类行为和想象时的大脑活动信号
人工神经网络技术解码人类行为和想象时的大脑活动信号

[2017-08-23]  为搜索引擎过滤信息,棋盘游戏对弈,识别图像 人工智能在某些任务中远远超过了人类智能。来自弗莱堡由神经科学家私人讲师Tonio Ball博士领导的几个杰出的BrainLinks-Bra......

国外眼科手术机器人为视网膜静脉阻塞患者带来希望
国外眼科手术机器人为视网膜静脉阻塞患者带来希望

[2017-03-20]  视网膜静脉阻塞,简称RVO,对患者来说是一种严重的疾病。该病病因为视网膜静脉中存在血液凝块,这可能导致视力严重下降,在某些情况下,病 ...

2017年:AI渗入云端
2017年:AI渗入云端

[2017-12-29]  云中的人工智能不仅仅是科技巨头的权力游戏,它也可能是人工智能领域的下一个飞跃。加利福尼亚州的Rigetti Computing公司刚刚使用其原型量子芯片之一在其云平台上运行机器学......

CES 2018:英特尔推出49量子位芯片争夺量子霸权
CES 2018:英特尔推出49量子位芯片争夺量子霸权

[2018-01-10]  在与Google、IBM的一场关于建立量子计算系统的马拉松比赛中,英特尔通过了一个关键的里程碑。近日,这个科技巨头已经推出了一个49个量子位 ...