Brilliant Labs发布全球首款集成多模态AI眼镜Frame

2024-02-13 产品中心

  [TechWeb]2月9日消息,AI眼镜开发商Brilliant Labs宣布推出Frame,这是全球首款集成多模态AI助手的眼镜。Frame不仅重新定义了视觉方式,还重新定义了用户与物理世界的交互方式,而它的外观设计与真实眼镜无差别。

  Frame的Noa是一款独一无二的全天候AI助手。 在外观之下,一种保护隐私的知识图谱,会分析用户与AI助手之间的复合交互,使Noa不但可以提供个性化的使用者真实的体验,还能形成自己的个性。

  例如,任务和请求可能包括总结一本书的要点,然后将书中的外语文本翻译成您偏好的语言;将白板会议整理成可共享的文档,与同事分享;识别皮肤问题并推荐现成的药膏;甚至根据一杯咖啡中的营养价值或含量建议每日饮用的健康量。

  甚至可以充分的利用眼镜内置的多模态GenAI功能,这在某种程度上预示着 Frame 可以组织多个 AI 系统一起完成更高级的任务。

  凭借用户都能够在与数字世界连接的同时解放双手的特质,Brilliant Labs 首次宣布与 Perplexity 合作,重新思考和定义 AI 增强眼镜时代的传统搜索引擎概念。Perplexity 基于首创的在线 LLMs ,参考最新的网页数据,其AI问答引擎可以即时简洁地回答口头查询,无需受制于同种类型的产品知识滞后的问题。因此,Frame 用户都能够随时随地、解放双手地获取来自互联网的实时可靠信息。

  例如,现在将 Perplexity 添加到 Noa 的多模式功能中,Frame 能够最终靠简单地眼球转动,将连锁零售店中的一件服装,与亚马逊上的价格作比较;在看房时,只需瞥一眼房子,就可以在类似贝壳的房产App上搜索其房源;或是要自己进行家庭维修时,Noa 能够在一定程度上帮助您锁定并交叉参考您完成项目所需的正确螺丝;您还可以立即查看路过的每家餐厅的评论,同时还能够交叉参考它是否有最近的负面新闻……可能性是无限的。

  “Frame 真正为人类与数字世界、人与彼此之间的互动带来了全新范式。Noa,一种全新的 AI 虚拟助手,让用户能更多地参与周围的世界,而不是与物理世界隔绝。我们大家都希望 Frame 能够使人们以全新的方式彼此连接,并在日常生活、工作场所、课堂等等方面开启新的体验。这是将GenAI带到人类眼前的独特承诺。”Brilliant Labs CEO兼联合创始人 Bobak Tavangar 表示。

  与市场上的其他增强型可穿戴设备不一样,Frame不仅仅是戴上一两个小时后就得取下的智能眼镜。 Frame本身就是一副光学眼镜,可以完全取代您每天佩戴的眼镜,只是提供了一个轻量级的个人AI助理。

  轻量级AI眼镜 - 使用工程级尼龙塑料制造,Frame经过优化,重量仅为39克,与标准眼镜一样轻,但坚固耐用,适合全天佩戴;

  时尚设计 - 呈现经典复古造型,提供烟熏黑、哑光冷灰和一个命名为H2O的透明变体,为日常风格增加了时尚元素;

  前置空间摄像头 - Frame集成了一个低功耗机器视觉摄像头,可以精准捕获和解读周围物理世界;

  集成麦克风 - 通过语音输入与您的人工智能助手来控制或交流,实现免提体验;

  多模态AI - 通过蓝牙5无线连接到您的手机,支持Perplexity, Stability AI和Whisper等的同时GenAI输入,为现实世界的问题提供高级解决方案;若Frame在中国上市,Noa将按照相关法域支持本地LLMs,包括文心一言;

  6DoF IMU - 位于鼻梁中央位置的先进 6 轴 IMU(惯性测量单元)为 Frame 提供了三个加速度轴和三个罗盘轴,可用于菜单导航、计步、方向等功能;

  定制处方光学 - 与 AddOptics 合作,能够最终靠独特的光学镜片铸造工艺将处方镜片精密粘合到 Frame 上。

  信守 Brilliant Labs 开源设备的承诺,Frame 将效仿其前身 Monocle。相应地,Brilliant Labs 将提供全面支持,为有意对 Frame 的硬件和软件做修改或破解的研发人员提供充足的资源,包括实时文档、开源代码库和硬件原理图。此外,研发人员还能调整 Noa 支持的AI模型参数。