Facebook研究人员正在构建虚拟空间以改善AI和AR

Facebook研究人员正在构建虚拟空间以改善AI和AR

虚拟助手能够分辨出您的起居室和厨房之间的区别吗?甚至可以帮你找到丢失的书或一组钥匙?借助具体的人工智能 - 它依赖于来自物理环境的数据 - 他们很快就可以。Facebook 推出了一个开源模拟和数据集,它希望能够帮助研究人员创建更真实的AR和VR,并最终帮助他们了解您的物理环境。

Facebook为人工智能研究创建了一个名为AI Habitat的新开放平台,而Facebook Reality Labs(直到去年是Oculus Research)发布了一个真实的样本空间数据集,它称之为Replica。Habitat和Replica现在都可供研究人员在Github上下载。通过这些工具,研究人员可以训练AI机器人同时行动,查看,交谈,推理和计划。副本数据集由18个不同的样本组成,包括起卧室,会议室和两层楼的房子。通过培训AI机器人来响应像客厅的副本3D模拟中的“找我的钥匙”这样的命令,研究人员希望有一天它可以在现实生活的客厅中对物理机器人做同样的事情。

仿真客厅的复制品旨在捕捉真实客厅中可能发现的所有微妙细节,从沙发上的丝绒投掷到墙上的反光装饰镜。3D模拟是照片般逼真的; 甚至表面和纹理都被捕获得非常清晰,Facebook认为这对于在这些虚拟空间中训练机器人至关重要。“就像FRL对虚拟人类的研究工作捕捉并实现人类存在的传播一样,我们的重建工作捕捉到了在一个地方,工作,家庭或商店,博物馆或咖啡馆里的感觉。

一些研究人员已经将Replica和AI Habitat用于试驾。Facebook AI最近在该平台上主持了自主导航挑战。获胜的研究团队将在今年的计算机视觉和模式识别会议(CVPR)上宣布。