Facebook开源嵌入式AI工具 旨在通过允许机器人分析环境声音
作者:发布时间:2020-08-24 09:58:11来源:开源中国
Facebook 推出了一个名为 SoundSpaces 的新的开源工具,专为所谓的 "嵌入式AI "而设计。该工具旨在通过允许机器人分析环境声音,帮助他们更有效地找到自己的方向。
图片来源:siliconangle
音频对导航很有用。例如,如果用户要求假想的机器人家庭助理取回正在响铃的智能手机,则将声音追踪到其来源可能比目视检查设备可能位于的每个房间要快得多。
SoundSpaces 是一个主要基于 3D 环境声学模拟的音频渲染信息集。该信息集设计用于 Facebook 的开放供应模拟平台 AI Habitat,它提供了一个软件程序传感器,使其可以在扫描的真实世界环境中插入声源的模拟。
SoundSpaces 提供了一系列音频文件,AI 开发者可以用这些文件在模拟中训练声音感知的 AI 模型。Facebook 方面表示,这些音频文件不是简单的录音,而是 "几何声学模拟"。这些模拟包括关于波浪如何从墙壁等表面反射的信息、它们如何与不同的材料相互作用、以及一些其他数据,开发人员可以使用这些数据来创建听起来很真实的模拟,以训练 AI 模型。
Facebook 研究科学家 Kristen Grauman 和 Dhruv Batra 在博客中写道,"据我们所知,这是第一次尝试训练既能看到又能听到的深度强化学习代理,以映射新环境并定位发声目标。通过这种方法,我们在导航方面实现了比使用单模态同行更快的训练和更高的准确性。"
此外,Facebook 方面还表示,他们已经开源了一个名为“Semantic MapNet”的工具,开发人员可以用来为模型提供某种空间内存以改善导航的软件模块。
关键词:
热门推荐
-
vivo新一代手机操作系统OriginOS发布时间官宣 采用全新UI设计
2021-11-29 -
高德地图推出辅助驾驶功能 集成ADAS预警导航功能
2021-11-24 -
热烈庆贺GUGU国际社交App 突破百万种子轮海外用户
2021-11-23 -
微软推送Edge 96稳定版更新 内置Office文件查看器和PDF体验改进
2021-11-23
热门专题
每日资讯更多+
-
“元宇宙”为何爆火?游戏ETF带来怎样的投资机遇?
2021-12-27 -
ar和vr的区别就是和用途 AR、VR是真火还是虚火?是复活还是重生?
2021-12-27 -
2021年VR/AR产业链日趋成熟,行业爆发在即
2021-12-27 -
未来5-10倍的VR/AR概念5大龙头公司
2021-12-27 -
VR全景漫游系统功能有哪些?自考院校/专业介绍
2021-12-23 -
又一家科技巨头加入直播大潮之中扎克伯格高度关注直播
2021-12-23
VR设备 更多+
-
V社自家VR设备获IGN 8.5分
2019-07-01 -
ARM显示芯片的设计可以为VR一体机带来更好的体验
2019-05-16 -
来自Bellevue的Valve Index原型VR硬件照片曝光
2019-05-16 -
Acer推出ConceptD OJO 4K Windows MR头显
2019-04-12
VR网站 更多+
-
鸥课学院
2017-09-12 -
玖的VR
2017-08-10 -
ARinChina技术论坛
2017-07-15 -
虚幻引擎社区
2017-07-15