前蘋果員工創立的Nex 希望藉由單鏡頭運作的體感互動技術創造更大商機

▲運用影像識別與人工智慧技術,透過單顆鏡頭即可偵測人體動作的Nex Playground

今年5月於SparkLabs Taiwan DemoDay 8展示運用影像識別與人工智慧技術,透過單顆鏡頭即可偵測人體動作的Nex,今日 (9/5)在臺灣宣佈推出應用其技術的體感遊戲主機Nex Playground,預計在今年底前出貨,建議售價爲新臺幣6299元,預購售價則是新臺幣5599元。

由前蘋果iWork資深工程經理李景輝等人於2017年創立的Nex,成員涵蓋來自蘋果、Google、微軟、Meta等公司,主要透過其影像識別與人工智慧技術,讓裝置端的單一鏡頭即可實現人體動作識別,不像過往相同功能必須仰賴Kinect等鏡頭技術才能實現。

▲相比早期需要透過多鏡頭才能實現的人體動作識別技術,目前僅需軟體運算與單顆鏡頭即可實現

Nex標榜其技術可用於手機、機上盒、PC,或是智慧電視等具備鏡頭裝置,只要鏡頭有一定程度解像能力,即可對應多人動作識別,甚至可區分前、後景深影像 (應該還是會看裝置端記憶體與資料傳輸頻寬而異),同時今年也將推出名爲Motion Development Kit (MDK)的開發工具,更與Unity技術合作,讓藉由Unity技術資源打造遊戲的開發者能直接套用此項技術,同時也有助於Nex推廣其技術。

▲與Unity合作,讓更多遊戲業者能直接取用其Motion Development Kit (MDK)開發工具

▲透過與Unity合作,Nex將能更快對外推廣其體感技術,並且標榜能以18點判斷當前人體動作,同時也支援跨平臺使用

從Nex發展來看,推出多款應用體感技術的遊戲,以及此次推出的體感遊戲主機Nex Playground,主要重心還是在於宣傳其以軟體運算的體感互動技術,甚至未來也不排除將技術與Epic Games旗下Unreal Engine開發資源合作,或是加入語音識別互動,讓體感互動體驗更加完整,同時也能讓開發者有更多技術應用可能性。

Nex當前聚焦一般家庭的客廳環境市場,主打透過體感互動方式促進家人情感,因此可以預期除了以體感遊戲主機Nex Playground佈局家庭娛樂消遣需求市場,未來也有可能與Sony、三星在內智慧電視業者合作,將其技術整合在多款智慧電視,搭配視訊鏡頭與控制器進行遊玩。

另一方面,藉由與Unity合作,預期Nex也能將其技術用於更多能以手勢、肢體動作互動的操作場景,例如博物館等展覽場合的內容互動,或是醫院等環境需要更多零接觸操作互動的裝置使用介面設計。而在目前發展階段,體感遊戲主機Nex Playground、遊戲內容應用顯然都能成爲Nex作爲技術展示平臺。

當然,遊戲市場依然會是Nex發展重心之一,包含與更多遊戲開發者、發行商合作,甚至在Nex Playground內建作業系統也不排除增加軟體市集,藉此收錄更多應用體感操作的遊戲作品。

針對Nex的技術是否能與Google的ARCore,或是蘋果的ARKit技術銜接應用,Nex團隊表示此部分絕對沒有問題,但以現階段發展主要還是會着重在身體動作識別的體感應用,因此對於擴增實境等虛擬視覺技術應用會放在後續發展規劃。

此外,Nex團隊也強調當前優勢在於技術整合,以及遊戲內容應用同步發展,本身同時掌握遊戲、人工智慧、鏡頭光學、操作系統,以及硬體等技術資源,相比其他以相似技術競爭市場的業者有更多應用層面的整合優勢,因此能在相似技術應用有更完整使用體驗與整合效益。

▲Nex Playground透過單顆鏡頭即可實現人體動作識別互動,並且透過指示燈號讓使用者知曉是否處於運作狀態

▲後方連接介面包含HDMI與USB-C

▲控制器主要用來操作上下左右、選擇、返回與呼叫主頁功能,本身並不具備手持體感功能,主要體感互動判斷還是以鏡頭拍攝識別完成

▲爲了避免產生隱私問題,Nex Playground可以透過實體蓋子配件覆蓋鏡頭

《原文刊登於合作媒體mashdigi,聯合新聞網獲授權轉載。》