Meta 研究人员推出了一种名为 SceneScript 的新房间扫描功能,该功能利用人工智能的力量自动识别房间的物体和建筑。虽然这听起来相当可怕,但 Meta 正在使用它来改进 AR 和 VR 设备,并使它们对消费者更加友好。
Threads上的一篇详细文章将当前的房间映射技术与新模型并置,展示了新模型使用 VR 和 AR 是多么容易。 Meta在 Quest Pro 上首次推出了手动房间映射,而Meta Quest 3上的深度传感器可以自动映射地板、墙壁和天花板。问题是您仍然必须手动映射沙发、桌子、窗户和其他房间功能。
这项新技术将使用深度传感器和摄像头来制作完整的房间地图,包括自动映射的家具和其他建筑特征。
Apple Vision Pro上的自动房间映射技术意味着用户根本不需要手动映射任何内容。尽管如此,苹果的耳机并不能自动识别具有名称和特征的物体,就像虚拟物体可以与之交互的空白表面一样。
Meta 更先进的映射功能意味着这些数据可以输入到像Meta LLaMA这样的 LLM ,然后可以询问有关房间的问题。一个研究示例,“粉刷这个房间需要多少罐油漆?”尤其有助于说明此类数据对于未来 AR 眼镜的价值。
Meta 使用Aria 合成环境数据集(由 100,000 个虚拟程序生成的房间组成的集合)来训练人工智能,使其能够了解房间的布局以及如何正确识别物体。这有助于它理解各种不同的布局和装饰类型,以及家具的变化,以及即使物品被移动,房间仍然可以被映射。
免责声明:本文由用户上传,如有侵权请联系删除!