8月26日,2023 Rokid Jungle發(fā)布會在杭州未來科技城國際會議中心召開。會上,杭州靈伴科技(Rokid)率先發(fā)布了消費級OST(Optical See Through)個人空間計算平臺Rokid AR Studio。與此同時,企業(yè)事業(yè)群發(fā)布了針對工業(yè)端“3+3+N”的產(chǎn)品生態(tài)架構(gòu),通過空間計算打造超級工廠。
杭州靈伴科技(Rokid)創(chuàng)始人、CEO祝銘明在發(fā)布會上表示:“我們希望帶給用戶體驗更極致、更輕便的空間計算產(chǎn)品,讓空間計算能更自然地融入日常生活和工作。”
微手勢 真AR
引領(lǐng)OST方向的AR進化路徑
相較之前的AR產(chǎn)品,杭州靈伴科技(Rokid)在人機交互方面具有突破性進展。
從交互方式上來看,不依賴手柄或遙控器,只用眼睛、手勢和聲音,就能實現(xiàn)實時操控。其中,手勢將成為最常用的交互方式:手指一捏,即可進行點擊和選中;左右撥動,可對正在瀏覽的界面或內(nèi)容進行切換。空間世界,一“觸”即發(fā)。在特定使用場景下,還能通過抬腕、捏拳、拖拽等進行操控。
從信息呈現(xiàn)來看,展現(xiàn)方式、邏輯和過去大不相同。信息流實現(xiàn)從網(wǎng)頁平鋪、手機信息流到空間展示的革命:信息顯示的物理局限被打破,無論在哪里,每一寸空間都可以成為你的屏幕,并且同時具有空間多屏與空間巨幕兩種展現(xiàn)方式,讓信息展現(xiàn)的界面有了無限的伸縮彈性。空間多屏可以同時開啟多個窗口,并列排布;顯示界面均帶有空間定位功能,輕微轉(zhuǎn)頭,信息一覽無余;行業(yè)首創(chuàng)超大巨幕,比例可達32:9,信息呈現(xiàn)不在受限于屏幕尺寸。此外,不同使用場景下空間交互的體驗也會有所不同。
YodaOS-Master操作系統(tǒng)發(fā)布
引領(lǐng)行業(yè)進入軟件和生態(tài)建設(shè)2.0時代
據(jù)了解,Rokid Station Pro搭載的全空間化AR操作系統(tǒng)YodaOS-Master,是物理世界和數(shù)字世界的連接者:通過攝像頭捕捉和基于分區(qū)的ATW/PTW 低延遲渲染,單目SLAM可實現(xiàn)厘米級精度,精準感知物理空間;依靠優(yōu)化算法和XR2+的硬件加速,利用高精度的實時圖像傳感器對3D手勢進行高精準的位置捕捉,同時通過低算法延遲滿足手勢追蹤的實時性要求,完成3D手勢交互。
為了實現(xiàn)最好的XR體驗,YodaOS-Master從芯片優(yōu)化、硬件設(shè)計、軟件架構(gòu)、AR算法還有創(chuàng)作工具等諸多方面都做了巨大升級,基于單目攝像頭的空間算法能力達到了業(yè)界領(lǐng)先水平,或是目前最為完整的一套面向空間計算時代的AR空間操作系統(tǒng)。
圍繞空間感知、空間理解、空間渲染和空間交互展開設(shè)計,YodaOS-Master通過從底層到頂層的系統(tǒng)設(shè)計優(yōu)化,為用戶帶來前所未有空間體驗的同時,也為開發(fā)者提供了從硬件、基礎(chǔ)層、平臺層直至應(yīng)用層的全鏈路服務(wù)。
Rokid AR開放平臺(ar.rokid.com)全新升級為UXR SDK 2.0。
Rokid UXR 2.0 開放SDK,支持0/3/6 DoF空間模式的選擇,以及手勢、射線、鍵鼠、語音等多模態(tài)交互方式,滿足多樣化的應(yīng)用開發(fā)需求;算法原子化,讓App可以在系統(tǒng)升級中自然獲得性能的提升,減少開發(fā)者負擔(dān);具備系統(tǒng)性能監(jiān)測工具和調(diào)試模式,便于開發(fā)者隨時了解運行狀態(tài);對Rokid跨代設(shè)備實現(xiàn)兼容。
UXR SDK 2.0支持Unity等OpenXR標準的主流引擎,以及MRTK接口,開發(fā)者可以輕松開發(fā)移植。目前,Rokid Station Pro里搭載的AR實驗室,大部分作品都是開發(fā)者在基于Unity引擎進行創(chuàng)作的。
在Master系統(tǒng)里,Rokid還內(nèi)置了自研JSAR引擎和小組件容器,JS開發(fā)者可以輕松上傳自己的組件。JSAR支持多平臺,讓開發(fā)更簡單、運行更安全;新增快應(yīng)用生態(tài)類型,不需下載安裝,點擊即可快速產(chǎn)出很多短小有趣的快應(yīng)用。
此外,Rokid還設(shè)立了AR專項開發(fā)者基金、發(fā)現(xiàn)、扶持優(yōu)秀的AR開發(fā)團隊,邀請開發(fā)者加入,打造豐富的AR應(yīng)用生態(tài)。
由龐大生態(tài)共同構(gòu)建的平臺才能催生應(yīng)用的繁榮。依賴Rokid AR Studio,Rokid與開發(fā)者將共同參與、共同推動AR行業(yè)的創(chuàng)新與發(fā)展,讓AR改造現(xiàn)實世界,讓AR成為人們?nèi)粘Ｉ畹囊徊糠帧?/p>
“3+3+N”
空間交互下的生產(chǎn)力變革
人類從器械時代到工業(yè)時代再到計算機時代,生產(chǎn)工具的進化讓生產(chǎn)力實現(xiàn)了飛躍。作為繼個人計算時代與移動計算時代后的下一個發(fā)展方向,空間計算打破空間物理限制,帶來新的交互方式,必將引起生產(chǎn)工具與生產(chǎn)力的新變革。
目前,杭州靈伴科技(Rokid)空間計算已經(jīng)應(yīng)用于智慧點巡檢、應(yīng)急演練、企業(yè)展廳、AR培訓(xùn)等多個應(yīng)用場景。
杭州靈伴科技(Rokid)企業(yè)事業(yè)群產(chǎn)品線負責(zé)人江偉健介紹:“就像手機支付替代現(xiàn)金、銀行卡,智能門鎖替代鑰匙一樣,工業(yè)因為科技進步同樣在‘減負’,空間計算讓每個工人都能根據(jù)實時且可視化的引導(dǎo)來進行精準的作業(yè)。”
據(jù)介紹,AR技術(shù)讓工廠作業(yè)拋開傳統(tǒng)掃碼、NFC、PDA的識別方式,低成本高自由的作業(yè)動線配置,讓每個人員能夠按流程規(guī)范操作,走到相關(guān)設(shè)備面前即可自動觸發(fā),快速生成設(shè)備動態(tài)數(shù)據(jù),讓作業(yè)人員快速知曉。并且在作業(yè)過程中可通過語音、手勢等多種交互方式快速查看圖紙、3D模型等,了解設(shè)備詳情甚至內(nèi)部精細結(jié)構(gòu)。
通過空間計算的加持,企業(yè)在信息獲取、危險預(yù)警、仿真制造等各個方面都能夠獲得極大的效率提升,從而進一步解放生產(chǎn)力。
不僅如此,空間計算技術(shù)的加入,也讓企業(yè)實訓(xùn)擺脫空間桎梏,區(qū)別于VR培訓(xùn)完全虛擬的體驗,AR可視化培訓(xùn)可以將培訓(xùn)內(nèi)容通過虛擬方式疊加在真實設(shè)備場景中,可以讓受訓(xùn)者邊培訓(xùn)邊操作,實現(xiàn)培訓(xùn)場景和培訓(xùn)模式的創(chuàng)新。
會上,杭州靈伴科技還發(fā)布了“3+3+N”的工業(yè)端產(chǎn)品架構(gòu),即三大硬件+xPert遠程指導(dǎo)、xHands智慧運檢、xWorks工廠漫游三大標品+智慧巡檢、專家指導(dǎo)、遠程售后、應(yīng)急指揮等N個應(yīng)用場景。
未來,杭州靈伴科技將繼續(xù)鉆研科技創(chuàng)新,堅持讓協(xié)同更高效,讓工作更簡單的愿景,用科技引領(lǐng)行業(yè)發(fā)展,推動數(shù)字化時代下的工業(yè)變革。
