Facebook AI 研究将助力打造更智能的 AR 眼镜和机器人

（ChinaIT.com讯）Facebook 勾画了这样的未来：用户佩戴增强现实眼镜或者其他人工智能设备来学习敲鼓或者创作新菜谱。为了实现这一愿景，社交网络需要其 AI 系统通过用户的双眼来观察世界。

Facebook 首席研究科学家 Kristen Grauman 表示：“未来，可穿戴设备将提供实时信息，或者帮助我们重拾记忆，为我们的日常生活提供便利。”她表示，这项技术最终将用于分析人类行为，以帮助我们查找错放的物品，例如钥匙。

未来很美好，但是现实情况是 9 月首次亮相的 Facebook 雷朋品牌智能眼镜不支持增强现实效果。挑战包括训练 AI 系统，让它更好地理解以人类视角捕捉的照片和视频，从而帮助人类记住重要信息。

Facebook 表示，两年间，他们联合 13 所高校和实验室，招募 750 人，捕捉了超过 2,200 小时的第一人称视频。参与者居住在英国、意大利、印度、日本、沙特阿拉伯、新加坡、美国、卢旺达和哥伦比亚，拍摄自己的日常活动，例如运动、购物、观察宠物或者修理花园。他们使用各种可穿戴设备，包括 GoPro 相机、Vuzix Blade 智能眼镜和 ZShades 视频录制墨镜。

从下个月开始，Facebook 研究人员将能够请求访问这些宝贵的数据，社交网络表示，这是全球最大的第一人称无剧本视频。这个新项目名为 Ego4D，揭露了技术公司如何改进增强现实、虚拟现实和机器人等技术，从而为我们的日常生活提供更大助力。

此时，Facebook 恰逢多事之秋。该社交网络正面临国会、请愿团体和公众的审查，此前《华尔街日报》发表的一系列文章称，公司的内部研究证实公司明知平台的危害，却试图向公众掩饰其危害。“吹哨人” Frances Haugen 曾是一名 Facebook 产品经理，她于上周在国会作证，内容是 5 月离职前收集的数千页保密文档。她计划近期在英国作证，并与 Facebook 半独立的监察委员会会面。

在 Haugen 泄露文件之前，Facebook 智能眼镜便受到批评家的质疑，他们担心设备将秘密录像。在研究第一人称视频的过程中，社交网络宣布已解决隐私问题。摄像头佩戴者可以查看与删除他们的视频，公司对捕捉的旁观者面部和车牌进行了模糊化处理。

Facebook 表示，他们在新项目中为研究人员设立了 5 个基准挑战，包括情景记忆，即了解什么时间发生了什么事；预测，以便计算机了解您接下来的动向；手部和对象操作，用于了解视频中的人正在做什么。最后两个基准分别用于理解视频中的人在何时说了什么话以及哪些人加入了谈话。

Grauman 表示：“设立标准有助于项目的顺利开展。这种方法非常强大，为我们提供了评估数据的系统方法。”

帮助 AI 理解第一人称视频有一定挑战性，因为计算机通常识别用户以第三人称视角拍摄的图像。当您拍摄自己踢足球或者坐过山车时，运动模糊和多角度镜头等问题接踵而至。

Facebook 表示其正考虑将项目扩展到其他国家。公司表示，提升视频片段的多样性至关重要，因为如果增强现实眼镜正在帮助用户煮咖喱或洗衣服，AI 助理需要了解世界各地的风俗各不相同。

Facebook 表示视频数据集包含在 9 个国家的 73 个位置拍摄的各种活动。参与者跨越不同的年龄、性别和职业。

新冠疫情也为研究带来了限制。例如，数据集中的更多片段是居家活动（如烹饪或手工），而不是公共活动。

英国布里斯托大学、美国乔治亚理工学院、日本东京大学和哥伦比亚安第斯大学等多所院校与 Facebook 建立了合作。

来源：cnet