毕业论文
您现在的位置: 单簧管 >> 单簧管资源 >> 正文 >> 正文

MIT新的科技突破用AI过滤声音,让音乐

来源:单簧管 时间:2025/2/23
能治疗白癜风的医院 http://pf.39.net/bdfyy/zqbdf/
据报道,麻省理工学院又出科技新突破,其计算机科学和人工智能实验室的研究人员所研发的新系统PixelPlayer,能够利用人工智能来区分和过滤声音,让音乐听起来更洪亮或更柔和。据悉,将指定视频录入经过充分训练的PixelPlayer,系统随机能够过滤伴奏,同时识别音源,接着计算图像中每个像素的音量,然后通过“空间定位”确定产生相似音波的片段。PixelPlayer的核心是一种基于乐器组合多模态训练的神经网络,数据集采用了Youtube上条未经修剪且未经标记的视频。其中,总时长为60小时的条视频用于训练,剩余的则用于验证和测试。在训练过程中,研究人员分别根据原声吉他、大提琴、单簧管、长笛和其他乐器向系统馈入了算法。这只是PixelPlayer多重机器学习框架的一个部分。经过训练后的视频分析算法将从剪辑帧中提取出视觉特征,这就是系统的第二个神经网络,即音频分析网络。音频分析网络将声音拆分为片段,并从中提取特征。最后,音频合成网络将把上述两个网络输出的特定像素和声波关联起来。PixelPlayer进行完全自监督的学习,人们无需对数据注释,而且系统目前已经能识别20种乐器。图片来源:RF

转载请注明:http://www.0431gb208.com/sjslczl/7383.html

  • 上一篇文章:
  • 下一篇文章: 没有了