總部位於加拿大多倫多的新創公司smartARM,正在開發一款能透過AI物體辨識自動選擇抓握方式的仿生義肢。手掌內建的攝影機會即時觀察使用者想拿取的物品,當場判斷該用哪種抓法,背後仰賴的是Meta開源釋出的視覺模型,以及Meta智慧眼鏡的輔助。

擺脫每次都要手動切換抓握方式的麻煩

傳統義肢大多需要使用者在拿取杯子、湯匙等形狀不同的物品時,透過按鈕等方式手動切換抓握模式。看似單純的動作,實際操作起來卻得經過好幾道手續。smartARM正是希望徹底消除這種負擔,因此在手掌部位內建攝影機,用來辨識周圍物體,並讓AI根據物體自動選出合適的抓握方式。該公司將這套控制軟體稱為Dexterity OS,根據官方網站,目前可辨識的日常物品已超過365種,未來還會透過更新持續擴充。

結合Meta的視覺模型與智慧眼鏡

物體辨識的核心,是Meta公開釋出的開源視覺模型DINOv2。它的特點在於只需輸入少量參考照片,就能學會辨識新物體,過去可能得花上數週才能完成的適應過程,如今只要登錄幾張照片即可達成。義肢單獨使用也能運作,但搭配Meta AI眼鏡與Meta的Wearables Device Access Toolkit後,能取得更貼近配戴者視角的影像資料,進一步提升辨識精準度。使用者可透過手機App登錄新物體,累積下來的資料會在整個社群中共享,讓義肢能隨著每個人的日常生活持續「成長」。整體流程可歸納為三個步驟:攝影機觀察、Dexterity OS思考、手指完成抓取,官方格外強調無需事先訓練即可直覺上手。

前NFL球員也肯定的使用體驗,目前於加拿大開放測試

長期使用smartARM的前NFL球員沙昆·葛瑞芬表示,對他而言最重要的是可擴充性與無障礙性,並認為這正是消費級義肢未來該有的樣貌。smartARM創辦人兼執行長哈馬亞爾·喬杜里也表示,打造一隻功能強大的手只是挑戰的一部分,讓它用起來夠直覺同樣重要,他希望透過自動物體辨識與抓握方式選擇,讓使用者能專注在想做的事情本身,而非操作方法。目前該產品仍處於加拿大境內的測試階段,具體價格將在正式上市前才公布。官方表示,正與保險公司及醫療機構協調,推動納入保險給付範圍,並已開放優先體驗名額的登記。

總結

smartARM透過將手掌攝影機與Meta的視覺模型DINOv2結合,打造出能依辨識到的物體自動選擇抓握方式的仿生義肢。搭配Meta AI眼鏡可進一步提升辨識精準度,使用者也能自行登錄新物體以實現個人化。目前該產品仍處於加拿大的測試階段,但作為一款無需事先訓練即可直覺使用的義肢,其邁向普及的後續發展值得關注。