—— 青亭网
Meta开放Project Aria Pilot数据集,未来将开发实时3D地图
Esther | 编辑
为了训练属于AR眼镜的视觉助手、提升AR定位能力,Meta早在2020年就开始通过Project Aria项目收集第一人称视频数据,用来训练AR眼镜的计算视觉算法。Meta表示:现有的计算机视觉算法主要是根据第三人称视角的照片和视频训练而成,因此总是以旁观者角度去感知周围环境。如果要让机器人、AR眼镜像人一样感知世界,那么将需要使用第一人称数据来训练,也就是人在执行各类任务时眼前看到的画面。
历经两年时间,Meta在新加坡、英国、美国等地陆续收集了大量第一人称视频数据。项目共有3000人参与数据收集,包括Meta员工、承包商、有偿的外部参与者等等,项目合作方包括卡内基梅隆大学、新加坡国立大学、宝马等等。数据采集环境包括Meta办公室、获得批准的私人住宅、公共场所。
最近,Meta将在美国拍摄的数据面向AI、ML科研人员开放,以加速机器感知和AI技术发展。Meta表示:发布Aria Pilot数据集的目的是,向外部科研人员展示一种可重复的研究基准,目的是推动第一人称计算机视觉、场景感知AI/ML算法的发展。
Aria Pilot数据集
据青亭网了解,这个数据集名为Project Aria Pilot,其中包含了159段第一人称视频,累计时长7小时,分别拍摄于每个5个地点。视频中包含了各种日常生活场景,比如洗碗、开门、做饭、在客厅使用手机、玩游戏、锻炼等等。除此之外,还包括利用多视角动捕系统拍摄的桌面交互数据,其中包含了人与物体交互的视频。此外,Aria Pilot数据集中还包含多个由演员拍摄的全天候视频,记录了Aria眼镜全天传感/捕捉环境数据的效果。
一个110°FOV的滚动快门RGB摄像头; 两个150°FOV全局快门单摄(用于SLAM和手势追踪); 两个80°FOV全局快门单摄(配备IR光源,用于眼球追踪); 两个1KHz IMU+气压计+磁力计+环境传感器; 七个48KHz空间麦克风; 一个1Hz GPS模块。
( END)
—— 青亭网
关注公众号:拾黑(shiheibook)了解更多
赞助链接:
关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/
随时掌握互联网精彩
- 韩元汇率对人民币2023年9月18日
- AI 0x0基于ChatGPT的桌面端 AI 生成助手应用
- AI时代,销售的幸福来敲门了!
- 面板厂强化品牌意识,三星显示推出OLED屏幕搜索网站
- 下行周期,半导体企业收购有何着眼点?
- 2022年航天领域前沿科技发展态势及2023年趋势展望
- 紫燕能否讲好佐餐卤味新故事?
- 英国未来十年国防太空能力发展重点分析
- Netcraft 发布 11 月 Web 服务器调查报告:nginx 市场份额领先
- 清明档总票房超7亿;字节跳动:印度政府冻结公司银行账户不合法;LG电子将对3700多名移动业务人员调整|Do早报
- 进一步提升企业上云体验,你需要知道的关键步骤
- 达尔优A87童趣主题机械键盘评测:童年的纸飞机