上海智位機(jī)器人(DFRobot)近日發(fā)布 seeMote系列。該系列包括 seeMote Cube和seeMote Cap兩款產(chǎn)品,面向空間計算應(yīng)用開發(fā)者、XR 解決方案提供商、工業(yè)培訓(xùn)、教育實驗、醫(yī)療教學(xué)模擬及 3D 創(chuàng)作等專業(yè)場景,提供可定位、可編程、可追蹤、可集成的實體空間輸入方案。
隨著空間計算設(shè)備逐步進(jìn)入專業(yè)應(yīng)用場景,開發(fā)者對穩(wěn)定空間參考、精準(zhǔn)姿態(tài)輸入以及真實工具追蹤的需求正在增加。傳統(tǒng)手勢交互適合輕量化操作,但在工業(yè)仿真、職業(yè)培訓(xùn)、醫(yī)療教學(xué)、實驗教學(xué)和 3D 建模等需要真實操作感的場景中,僅依賴懸空手勢往往難以滿足穩(wěn)定性、精確性和操作反饋需求。

seeMote正是為這一變化而設(shè)計,通過Cap實現(xiàn)實體工具追蹤,借助Cube完成高精度的手持控制能力,幫助開發(fā)者將真實工具、手持控制和現(xiàn)實操作過程無縫接入visionOS應(yīng)用。相比從零開始構(gòu)建追蹤與輸入硬件,該系列產(chǎn)品可幫助開發(fā)團(tuán)隊更快完成原型驗證、場景測試與應(yīng)用集成。
值得注意的是,蘋果聯(lián)合DFRobot與MIKROE推出了標(biāo)準(zhǔn)化空間配件,DFRobot這兩款正是其中的核心硬件。

從手勢交互走向?qū)嶓w空間輸入
過去幾年,空間計算應(yīng)用主要依賴手勢、眼動、語音或通用控制器進(jìn)行交互。這些輸入方式在娛樂、展示和輕量辦公場景中具有優(yōu)勢,但當(dāng)空間計算進(jìn)入專業(yè)工作流時,開發(fā)者開始需要更加穩(wěn)定、可控、可復(fù)現(xiàn)的實體輸入方式。
例如,在工業(yè)培訓(xùn)中,用戶可能需要使用真實螺絲刀、扳手或裝配工具完成操作訓(xùn)練;在醫(yī)療教學(xué)模擬中,學(xué)生可能需要握持接近真實器械的訓(xùn)練工具;在實驗教學(xué)中,學(xué)習(xí)者需要使用實驗器具完成步驟練習(xí);在 3D 創(chuàng)作場景中,設(shè)計師希望通過具有實體觸感的設(shè)備進(jìn)行模型旋轉(zhuǎn)、縮放、移動或繪制。
這些場景的共同需求是:真實工具不僅要被用戶握在手中,也需要被空間計算系統(tǒng)感知。也就是說,空間應(yīng)用需要知道工具在哪里、朝向哪里、正在如何移動,并將這些信息實時映射到數(shù)字環(huán)境中。
seeMote Cap:讓真實工具進(jìn)入數(shù)字空間
seeMote Cap是一款輕量、小型的可安裝式空間追蹤設(shè)備,可固定在多種手持工具、教具或訓(xùn)練器具表面,使真實物體具備可追蹤的空間姿態(tài)能力。
開發(fā)者可將 seeMote Cap安裝在畫筆、螺絲刀、實驗器具、訓(xùn)練用手術(shù)器械、教學(xué)模型或其他手持工具上,使這些真實工具在空間計算應(yīng)用中被識別和追蹤。設(shè)備支持 6DoF 姿態(tài)輸入,可將工具的位置、方向和運動狀態(tài)同步至虛擬環(huán)境中,幫助應(yīng)用實現(xiàn)真實工具與數(shù)字對象之間的空間映射。

DFRobot seeMote Cap可固定在多種手持工具表面
通過這一方式,開發(fā)者無需自行設(shè)計復(fù)雜的追蹤硬件,即可讓真實工具參與空間交互。例如,在職業(yè)培訓(xùn)中,學(xué)員可以使用真實工具完成裝配動作,應(yīng)用系統(tǒng)同步顯示操作路徑和步驟反饋;在醫(yī)療教學(xué)模擬中,學(xué)生可以使用訓(xùn)練器械完成手法練習(xí),系統(tǒng)可基于工具姿態(tài)提供教學(xué)反饋;在實驗教學(xué)中,教師可以將實驗器具動作映射到虛擬實驗流程中;在創(chuàng)作場景中,用戶可以使用畫筆、雕刻工具或其他實體工具進(jìn)行空間繪制和模型編輯。
與傳統(tǒng)通用控制器相比,seeMote Cap的優(yōu)勢在于保留了真實工具本身的握持方式、操作阻力和使用習(xí)慣。用戶操作的不是抽象控制器,而是接近真實任務(wù)流程的工具本體。這使得空間計算應(yīng)用能夠更自然地服務(wù)于教學(xué)、培訓(xùn)、創(chuàng)作和模擬場景。
seeMote Cube:面向空間計算應(yīng)用的空間手持設(shè)備
seeMote Cube是一款面向空間計算開發(fā)場景設(shè)計的空間手持設(shè)備,它為開發(fā)者提供穩(wěn)定的空間參考和可編程實體輸入能力,適用于空間應(yīng)用開發(fā)、交互原型驗證、行業(yè)場景測試和解決方案集成。
seeMote Cube可放置在桌面、操作臺或訓(xùn)練區(qū)域中,為空間計算應(yīng)用提供穩(wěn)定的物理參考。開發(fā)者可以基于該設(shè)備建立虛擬內(nèi)容與真實環(huán)境之間的對應(yīng)關(guān)系,使虛擬對象更穩(wěn)定地固定在特定操作區(qū)域內(nèi)。在符合設(shè)備工作條件的環(huán)境中,該設(shè)備可為應(yīng)用提供持續(xù)、穩(wěn)定的定位參考,降低復(fù)雜環(huán)境對空間定位體驗的影響。

DFRobot seeMote Cube 空間手持設(shè)備
作為手持交互設(shè)備,seeMote Cube支持 6DoF 姿態(tài)輸入,可輸出位置與旋轉(zhuǎn)信息,用于虛擬對象操控、空間菜單選擇、工具切換、模型編輯和交互測試。同時,設(shè)備配備多個可編程實體按鍵與震動反饋能力,開發(fā)者可根據(jù)不同應(yīng)用場景,將按鍵映射為抓取、確認(rèn)、撤銷、縮放、旋轉(zhuǎn)、模式切換等操作,并通過震動反饋增強空間交互中的觸覺提示。
在 3D 建模場景中,用戶可通過 seeMote Cube 對模型進(jìn)行旋轉(zhuǎn)、平移、縮放和視角控制;在工業(yè)模擬場景中,開發(fā)者可將其配置為特定工具或控制器;在多人協(xié)作和專業(yè)培訓(xùn)場景中,該設(shè)備也可作為穩(wěn)定的實體參考點和交互入口,幫助應(yīng)用實現(xiàn)更可控的空間操作流程。
兩款設(shè)備協(xié)同,構(gòu)建實體空間交互基礎(chǔ)

DFRobot seeMote Cap & seeMote Cube
seeMote Cap和seeMote Cube可分別滿足手持控制和真實工具追蹤需求,也可在同一應(yīng)用場景中協(xié)同使用。
在一個典型的工業(yè)培訓(xùn)應(yīng)用中,seeMote Cube可作為操作區(qū)域的空間參考點,幫助虛擬零部件穩(wěn)定呈現(xiàn)在真實工作臺上;同時,seeMote Cap可安裝在螺絲刀、扳手或其他訓(xùn)練工具上,將學(xué)員的工具姿態(tài)同步到應(yīng)用中。系統(tǒng)由此可以識別用戶是否拿起了正確工具、是否按照正確角度進(jìn)行操作,以及是否完成了預(yù)設(shè)步驟。
在醫(yī)療教學(xué)模擬場景中,seeMote Cube可用于建立訓(xùn)練區(qū)域的空間參考,seeMote Cap]可安裝在訓(xùn)練用器械上,用于模擬手術(shù)路徑、器械角度和操作流程。需要說明的是,該類應(yīng)用主要面向教學(xué)、訓(xùn)練和模擬場景,并不代表產(chǎn)品可直接用于臨床診療或真實手術(shù)操作。

醫(yī)療教學(xué)模擬場景
在航空維修教學(xué)、飛行操作教學(xué)或復(fù)雜設(shè)備訓(xùn)練場景中,該系列產(chǎn)品也可用于構(gòu)建培訓(xùn)原型和模擬系統(tǒng),幫助開發(fā)者驗證空間交互流程。相關(guān)應(yīng)用應(yīng)根據(jù)行業(yè)要求進(jìn)行進(jìn)一步認(rèn)證和系統(tǒng)級驗證。
面向開發(fā)者的開放集成能力
作為一家長期服務(wù)開發(fā)者和開源硬件社區(qū)的公司,DFRobot在seeMote 的設(shè)計中延續(xù)了開放、可編程和易集成的產(chǎn)品理念。
該系列產(chǎn)品面向開發(fā)團(tuán)隊提供可調(diào)用的空間姿態(tài)數(shù)據(jù)、實體按鍵事件和反饋控制能力,便于開發(fā)者將設(shè)備集成到空間計算應(yīng)用、XR 原型系統(tǒng)或行業(yè)解決方案中。根據(jù)不同開發(fā)需求,開發(fā)者可將設(shè)備數(shù)據(jù)映射為虛擬對象控制、工具姿態(tài)同步、操作流程識別、空間菜單交互或多步驟訓(xùn)練反饋。
面向?qū)I(yè)場景,降低空間交互開發(fā)門檻
空間計算正在從內(nèi)容展示和沉浸體驗,走向更復(fù)雜的專業(yè)應(yīng)用。對于開發(fā)者而言,真正的挑戰(zhàn)不僅是把虛擬內(nèi)容放進(jìn)現(xiàn)實空間,更是如何讓用戶用真實、穩(wěn)定、可控的方式與數(shù)字內(nèi)容發(fā)生交互。
seeMote系列的推出,正是為了降低這一過程中的硬件開發(fā)門檻。開發(fā)團(tuán)隊無需從零設(shè)計追蹤模塊、實體輸入設(shè)備或工具姿態(tài)同步方案,即可圍繞真實工具和真實工作流快速構(gòu)建空間交互應(yīng)用。
該系列可廣泛應(yīng)用于:
● 工業(yè)裝配與維修培訓(xùn)
● 職業(yè)教育與技能訓(xùn)練
● 醫(yī)療教學(xué)模擬和手術(shù)流程訓(xùn)練
● 實驗教學(xué)與虛擬實驗室
● 3D 建模、空間繪制與創(chuàng)作工具
● 航空維修教學(xué)與操作流程模擬
●多人協(xié)作、遠(yuǎn)程指導(dǎo)和復(fù)雜任務(wù)演示
通過實體空間輸入硬件,開發(fā)者可以更容易地將真實世界中的工具、動作和流程轉(zhuǎn)化為空間計算應(yīng)用中的可識別數(shù)據(jù),從而構(gòu)建更自然、更專業(yè)、更接近真實工作環(huán)境的交互體驗。
上市與開發(fā)者支持
seeMote Cap 與 seeMote Cube 計劃于 2026 年秋季上線。開發(fā)者可訪問DFRobot seeMote 官網(wǎng) https://www.dfrobot.com/seemote 了解更多信息。開發(fā)者也可通過 Apple Developer 網(wǎng)站了解更多 visionOS 開發(fā)信息。

