设为首页收藏本站在线订餐房产交易查询 繁体中文
开启辅助访问

温尼伯站

 找回密码
 注册用户
搜索
热搜: 接送 租房
温尼伯站»论坛 › 温尼伯站 › 资讯信息 › 科学家设计新AI系统 从无声钢琴演奏视频中再现演奏声音
返回列表 发新帖
查看: 172|回复: 0
上一主题 下一主题

[综合资讯] 科学家设计新AI系统 从无声钢琴演奏视频中再现演奏声音

[复制链接]
温尼伯站

14万

主题

14万

帖子

29万

积分

管理员

有bug，有问题请私信。

Rank: 9Rank: 9Rank: 9

积分
290469
跳转到指定楼层
楼主
发表于 2021-2-6 04:16:40 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
据外媒New Atlas报道，想象一个计算机程序能够直观地识别出在无声的钢琴演奏视频中演奏的是哪首乐曲，或许并不夸张。然而，一个新的人工智能系统却更进一步，以数字方式逼真地再现了钢琴演奏的声音。  



这项技术被称为Audeo，由华盛顿大学的一个团队设计。研究人员使用钢琴家保罗·巴顿的YouTube视频对系统进行了培训和测试。培训包括约17.2万巴顿演奏巴赫和莫扎特等著名古典作曲家音乐的视频帧。  

在分析一段无声视频时，所产生的系统首先会观察哪些键被按下的顺序，确定各个音符及其排列方式。也就是说，它还能感知到每个键被击打的力度和被按住的时间--这让它能计算出每个音符的强度，以及它在随后弹奏的音符下面持续的时间长度。它还考虑到了钢琴独特的声学特性。然后，这些数据被转换为一种可以被现有的数字合成器理解的格式。据报道，当该合成器回放音乐文件时，它听起来非常像原始的钢琴音乐。  

在对Audeo的测试中，它的任务是根据巴顿演奏的静音视频重现钢琴音乐，而不是系统所训练的音乐作品。当SoundHound等音乐识别应用分析这些再现时，它们能够以大约86%的准确率识别出乐曲。相比之下，当这些应用分析相同视频中的原始钢琴音频时，其识别准确率攀升至93%。随着技术的进一步发展，这种差距应该会缩小。  

“我们希望我们的研究能够实现与音乐互动的新方法，”该研究的高级作者Eli Shlizerman副教授说。“例如，未来的一个应用是，Audeo可以扩展到虚拟钢琴，摄像头只记录一个人的手。此外，通过将摄像头放在真实的钢琴之上，Audeo有可能协助教学生如何演奏的新方法。”
【郑重声明】温尼伯站坛刊载此文不代表同意其说法或描述，仅为提供更多信息，也不构成任何投资或其他建议。转载需经本网同意并注明出处。本网站有部分文章是由网友自由上传，对于此类文章本站仅提供交流平台，不为其版权负责；部分内容经社区和论坛转载，原作者未知，如果您发现本网站上有侵犯您的知识产权的文章，请及时与我们联络，我们会及时删除或更新作者。
回复

使用道具 举报

返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册用户

本版积分规则



手机版|温尼伯站

JS of wanmeiff.com and vcpic.com Please keep this copyright information, respect of, thank you!JS of wanmeiff.com and vcpic.com Please keep this copyright information, respect of, thank you!

GMT-5, 2024-5-29 18:03 , Processed in 0.082028 second(s), 37 queries , Gzip On.

温尼伯站版权所有

All right reserved by Winnipeg Chinese Media.

快速回复 返回顶部 返回列表