Brilliant Labs首款集成多模态AI眼镜Frame,重40克,语音互动,实时翻译、网站搜索、视觉分析等任务

发布于: 雪球转发:0回复:0喜欢:0

AI眼镜开发商Brilliant Labs宣布推出Frame,这是全球首款集成多模态AI助手的眼镜。Frame不仅重新定义了视觉方式,还重新定义了用户与物理世界的交互方式,而它的外观设计与真实眼镜无差别。

外观特点

和正常眼镜差异不大,外观设计上参考列侬、乔布斯、甘地等大人物的款式,也算是一种致敬。目前可预定的颜色有黑色,灰色和白色。看着非常轻巧,重量仅仅40克,而苹果的vision pro是650克。

现在可以预定,价格349美金,为vision pro的十分之一,如果镜片定制价格则是448美金,4月15正式开售。

构造和功能

Frame的超能力有哪些呢?根据官方宣传,用户可以通过语音和Frame互动,完成实时翻译、网站搜索、视觉分析等任务,比如用户可以通用语音来让Frame对看到的商品进行价格等信息搜索,对摆在自己前面的食物进行营养成份和热量的分析等。Frame通过一个640 x 400像素的微OLED屏把用户想要的结果投屏显示在用户的正前方(如下图)。

Brilliant Labs同时出了一个移动应用 - Noa,可以与Frame配对。Noa内置了一个对话助手,采用了GPT4来进行视觉分析,whisper来做翻译,Perplexity作为搜索。Noa在与用户的互动过程中会进行自我学习和进化。目前Noa还是免费的,Brlliant公司正在考虑怎么收费。

Frame还有一个特色就是它是开源的,用户可以修改和定制自己个性的眼镜。用户如果不选择和Noa配对,也可以用Frame来连接其他app来使用。

此外,Frame还带有一个1280 x 720的摄像头, 耳机,以及一个222毫安的电池, 保证眼镜可以续电一天(下图就是充电的样子)。

关于Brilliant Labs公司

公司成立与2019年,总部在新加坡,创始人有三位,分别是Bobak Tavangar(目前Brilliant CEO,此前在Apple工作)、Benjamin Heald(目前是公司的总设计师)、Raj Nakarja,目前公司规模也很小,大概不到10人。

公司最新在2月8号获得了300万美金的天使轮融资,且投资者就是非常火的游戏Pokémon Go的作者John Hanke。

整体看还是非常初期的一个创业公司,但是从宣传看,产品还是比较成熟的,就不知道实际效果如何。

与市场上的其他增强型可穿戴设备不同,Frame不仅仅是戴上一两个小时后就得取下的智能眼镜。 Frame本身就是一副光学眼镜,可以完全取代您每天佩戴的眼镜,只是提供了一个轻量级的个人AI助理。

轻量级AI眼镜 - 使用工程级尼龙塑料制造,Frame经过优化,重量仅为39克,与标准眼镜一样轻,但坚固耐用,适合全天佩戴

时尚设计 - 呈现经典复古造型,提供烟熏黑、哑光冷灰和一个命名为H2O的透明变体,为日常风格增加了时尚元素

生动显示 - Frame的高分辨率生动显示屏亮度高达3000尼特

前置空间摄像头 - Frame集成了一个低功耗机器视觉摄像头,可以精准捕获和解读周围物理世界

集成麦克风 - 通过语音输入与您的人工智能助手进行控制或交流,实现免提体验

多模态AI - 通过蓝牙5无线连接到您的手机, 支持Perplexity, Stability AI和Whisper等的同时GenAI输入,为现实世界的问题提供高级解决方案;若Frame在中国上市,Noa将按照相关法域支持本地LLMs,包括文心一言

6DoF IMU - 位于鼻梁中央位置的先进 6 轴 IMU(惯性测量单元)为 Frame 提供了三个加速度轴和三个罗盘轴,可用于菜单导航、计步、方向等功能

定制处方光学 - 与 AddOptics 合作,可以通过独特的光学镜片铸造工艺将处方镜片精密粘合到 Frame 上

关于智能可穿戴式设备的思考

24年AI在边缘设备的应用是一个爆发点,手机转向AI,但是手机的问题是还不足够便捷的开展实时多模态,比如一直拿着手机其实很不方便,应用的时候你得开启扫描等。魅族今年要推出第一款AI device,要求直觉式AI互动。

因此,符合人体工学的可穿戴式设备就会成为一个辅助,近期vision pro很火爆,但是先不说那么大个头箍戴头上不美观不方便,关键还重达650克(1斤多呀),有点反人类,不适合长时间佩戴。

2024 CES前出现了 AI PIN和Rabbit R1等新型的AI终端。但感觉2者的AI互动不如智能眼镜。总之期待最符合人体工学的可穿戴设备出来,无论是google glass,还是vision pro做减法,还是新锐的小企业冒头,也希望国内的厂商们加油,除了代工生产,我们也得有原创。

Frame的硬件要求:集成麦克风+640 x 400显示+6DoF IMU +1280 x 720摄像头+蓝牙5连接手机实现多模态AI 。蓝牙芯片采用了Nordic-nRF52840。视觉,显示和IMU传感控制芯片暂不清楚。但$恒玄科技(SH688608)$ 最新超低功耗 6nm SoC完全可胜任该主控,一个芯片解决显示,视觉,传感和蓝牙。