将ChatGPT应用在增强现实设备中会怎么样?

vr|ar|虚拟现实

167人已加入

描述

如果你可以将ChatGPT的功能打包到一个可以放在手掌大小的增强现实设备中,会怎么样?

这是一个有趣的问题:这个设备已经存在了,它被称为Monocle。这款售价349美元的开源AR设备由Brilliant Labs制造,可夹在普通眼镜上,放在手掌中,并装在附带的充电盒中。该公司首席执行官Bobak Tavangar将该设备描述为“可爱”,并相信它将为任何想要尝试AR的人提供一个优雅、易接触的入口。

Tavangar说:“(Monocle)是一种不引人注目的东西;它可以夹在眼镜上面。当你在社交场合,或者当你使用完毕,你可以把它摘下来,就像(苹果)AirPods一样,会放在你的口袋里。”

Monocle的开源设计为人工智能实验带来了福音

2023年3月,当ChatGPT的平视显示器RizzGPT在推特上疯传时,Monocle受到了一阵关注。一群斯坦福大学的学生将这个项目放在一起,可以在Github上找到,看看ChatGPT在面对面对话中如何有用。它的名字是对“rizzing”的模仿,该项目的创建者将其描述为“charisma as a service(CaaS)”。学生们在RizzGPT上开发了一个人工智能代理,可以通过Monocle的内置摄像头识别朋友,并根据最近的文本提出对话话题。

当然,这一切都有点开玩笑,但抛开幽默的部分,你会发现Monocle开源方法背后的动机。Monocle优先考虑可负担性、可访问性和易开发性,而不是沉浸式交互、性能和图形逼真度。这些特征与微软HoloLens、Vuzix Blade和Nreal Air等更大、更复杂的AR设备形成了鲜明对比。

Monocle提供了一个640×400像素的小型微型OLED显示屏和20度的窄视场,这些限制使视觉体验不如具有更宽视场的替代品。然而,当文本界面可以用来接入人工智能服务时,这种限制又显得不那么重要了。Tavangar提到了2013年的电影“Her”作为一个例子。在电影中,一个强大的人工智能助手Samantha完全通过语音进行交互。可以肯定的是,RizzGPT的功能不如Samantha,但其用户界面背后的想法是相似的。

人工智能

Tavangar说:“如果多点触控是iPhone的赋能技术,并且真的促成了现代智能手机的诞生,那么我们将生成人工智能视为AR的多点触控。”

Brilliant Labs还致力于开源原则,使人工智能开发更容易实现。该公司提供一个名为StreamLogic的拖放接口,该接口可接入Monocle附带的现场可编程门阵列处理器。FPGA依次与摄像头、麦克风和显示器接口。Tavangar表示,StreamLogic使为Monocle开发人工智能应用程序“几乎就像在建造乐高积木一样”,并补充说,它可以很容易地作为扫描物理空间或产品条形码的应用程序的平台,以及其他用途。

Monocle物理设计的示意图和3D文件也可用,应该有助于开发人员调整、改进和定制硬件。Monocle于2023年2月发布,这一点尚待证明。但其他开源项目,如MNT Reform和Pocket Reform笔记本电脑,通过源自社区的设计改进,显示了这种方法的好处。

开源可能从苹果的加入中受益

Brliliant Labs决定开放源代码,这使其与通常提供AR和VR功能的昂贵封闭源代码耳机的设备截然不同。

Moor Insights&Strategy首席分析师Anshel Sag表示:“在开源软件方面,AR空间有限。” 他指出,Khronos Group提供了一个名为OpenXR的开源VR/AR API,但补充道,“这些功能大多在VR中,很少在AR中。”近年来,Magic Leap转向了开源,但Magic Leap 2令人望而却步的3299.99美元MSRP是一个障碍。

关于苹果混合现实耳机的传言在2021年愈演愈烈,并继续发酵,最新的成果或将在2023年WWDC上曝光。这是否属实还有待观察,但苹果在AR中的地位已经通过ARKit得到了体现,ARKit是一种API,能够为大多数iPhone和iPad开发AR。ARKit功能强大,但实际上只支持苹果设备,而像Khronos的OpenXR这样的开源替代品不支持iOS。对于希望构建AR的开发人员来说,这种碎片化是一个问题,因为选择支持一个API通常意味着放弃对另一个API的支持。如果苹果的AR耳机上市,只会加剧这一困境。

尽管如此,Sag认为,“苹果的推出可能会让人们对开源方法产生更大的兴趣,特别是考虑到苹果在开发和货币化方面对其开发者的束缚。仍有很多开发者会使用苹果的平台,但我也相信,扩大市场将增加对开源方法的需求。”

Tavangar本人曾在苹果公司担任项目负责人,他同意Sag的观点。他表示,传闻中的苹果的新品发布发,或将为停滞的AR行业注入创新和投资。“我们很高兴苹果现在能进入这个领域,”他说。

编辑:黄飞

 

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分