总部位于加拿大多伦多的初创公司smartARM,正在开发一款能够通过AI物体识别自动选择抓握方式的仿生义肢。手掌内置的摄像头会实时识别使用者要拿取的物体,并当场判断应采用的抓握姿势,这背后依托的是Meta开源的视觉模型,以及Meta智能眼镜的辅助。
摆脱每次都要手动切换抓握方式的负担
传统义肢大多需要使用者在拿取水杯、勺子等形状不同的物品时,通过按钮等方式手动切换抓握模式。看似简单的动作,实际操作起来却要经过好几个步骤。smartARM正是希望彻底消除这种负担,为此在手掌部位内置摄像头,用来识别周围物体,并让AI根据物体自动选择合适的抓握方式。该公司将这套控制软件称为Dexterity OS,根据官网介绍,目前可识别的日常物品已超过365种,未来还会通过更新持续扩充。
将Meta的视觉模型与智能眼镜相结合
物体识别的核心是Meta公开的开源视觉模型DINOv2。其特点是只需输入少量参考照片,就能学会识别新物体,过去可能需要数周才能完成的适应过程,如今只需登记几张照片即可实现。义肢单独使用也能运作,但搭配Meta AI眼镜和Meta的Wearables Device Access Toolkit后,可以获取更接近佩戴者视角的影像数据,从而进一步提升识别精度。使用者可以通过手机应用登记新物体,积累下来的数据会在整个社区中共享,使义肢能够随着每个人的日常生活不断"成长"。整个流程可归结为三个步骤:摄像头观察、Dexterity OS思考、手指完成抓取,公司格外强调无需事先训练即可直观上手。
前NFL球员也认可的使用体验,目前在加拿大开放测试
长期使用smartARM的前NFL球员沙克姆·格里芬表示,对他而言最重要的是可扩展性与可及性,并认为这正是未来消费级义肢应有的样子。smartARM创始人兼首席执行官哈马亚尔·乔杜里也表示,打造一只功能强大的手只是挑战的一部分,让它用起来足够直观同样重要,他希望通过自动物体识别和抓握方式选择,让使用者能够专注于想做的事情本身,而不是操作方法。目前该产品仍处于加拿大境内的测试阶段,具体价格将在正式上市临近时公布。公司方面表示,正在与保险公司及医疗机构协调,推动纳入保险覆盖范围,并已开放优先体验名额的登记。
总结
smartARM通过将手掌摄像头与Meta的视觉模型DINOv2相结合,实现了AI根据识别到的物体自动选择抓握方式的仿生义肢。搭配Meta AI眼镜可进一步提升识别精度,使用者还能自行登记新物体实现个性化。目前该产品仍处于加拿大的测试阶段,但作为一款无需事先训练即可直观使用的义肢,其迈向大规模普及的进展值得关注。
