工業(yè)級(jí)煤礦遠(yuǎn)程協(xié)作AR系統(tǒng)功能介紹

井下在遇到技術(shù)問(wèn)題或者故障時(shí),現(xiàn)場(chǎng)工作人員佩戴眼鏡,通過(guò)軟件系統(tǒng)與后臺(tái)的管理人員或者專(zhuān)家進(jìn)行聯(lián)通,后臺(tái)人員可以通過(guò)眼鏡上的攝像頭以現(xiàn)場(chǎng)視角觀看整個(gè)現(xiàn)場(chǎng)具體情況,以此對(duì)故障和問(wèn)題進(jìn)行快速判斷,并給與指點(diǎn)。后臺(tái)人員可以將指導(dǎo)圖片,文字以及后臺(tái)專(zhuān)家的電腦屏幕顯示實(shí)時(shí)傳輸?shù)窖坨R中。
同時(shí),此模塊功能還包括實(shí)時(shí)標(biāo)記和截屏標(biāo)記,即后臺(tái)管理人員可以在傳送回來(lái)的視頻圖像上進(jìn)行標(biāo)記,而此標(biāo)記可以實(shí)時(shí)同步的在前端眼鏡上進(jìn)行展示,或者后臺(tái)人員可以實(shí)時(shí)截取現(xiàn)場(chǎng)圖片,在上面標(biāo)注說(shuō)明后發(fā)送到前端眼鏡上進(jìn)行顯示。
系統(tǒng)可以在后臺(tái)系統(tǒng)編寫(xiě)數(shù)字化的工作流程,詳細(xì)規(guī)定每個(gè)流程的動(dòng)作和目標(biāo),以列表形式存放在系統(tǒng)中。在開(kāi)始工作后,整個(gè)流程會(huì)以文字和語(yǔ)音播報(bào)方式在眼鏡中逐條展現(xiàn),工作人員按照這些指示進(jìn)行操作,每個(gè)步驟只有確認(rèn)后才可以進(jìn)行下一步。在列表中可以插入視頻和圖片,以便在工作過(guò)程中隨時(shí)調(diào)用,用以參考。
同時(shí),整個(gè)工作過(guò)程可以實(shí)時(shí)以現(xiàn)場(chǎng)視角進(jìn)行視頻拍攝,并存入到手機(jī)上,并可以通過(guò)無(wú)線網(wǎng)絡(luò)上傳到后臺(tái)系統(tǒng),以備查驗(yàn)。在工作過(guò)程中,工作人員可以隨時(shí)調(diào)用遠(yuǎn)程交互功能與后臺(tái)進(jìn)行實(shí)時(shí)音視頻通信。在工作流程完成后,要求系統(tǒng)可以自動(dòng)生成執(zhí)行報(bào)告,包括流程中每個(gè)步驟的實(shí)施情況和實(shí)施結(jié)果等,此報(bào)告并可以上傳到后臺(tái)系統(tǒng)中進(jìn)行存儲(chǔ)。
提供AR遠(yuǎn)程協(xié)作軟件的賬號(hào)服務(wù),服務(wù)內(nèi)容包括:
1)音視頻通話:通過(guò)穿戴式智能設(shè)備可連線遠(yuǎn)程專(zhuān)家,解放雙?,進(jìn)行音視頻通話,將現(xiàn)場(chǎng)視角畫(huà)面即時(shí)傳輸給專(zhuān)家,達(dá)到你所見(jiàn)即我所見(jiàn)的交互體驗(yàn),遠(yuǎn)程專(zhuān)家可查看在線智能穿戴設(shè)備的視頻實(shí)時(shí)畫(huà)面。
2)多人會(huì)話:具備多人會(huì)話功能,實(shí)現(xiàn)多人協(xié)作診斷,支持的專(zhuān)家并發(fā)會(huì)話數(shù)不少于5人。
3)實(shí)時(shí)標(biāo)注:在通訊過(guò)程中專(zhuān)家端可實(shí)時(shí)在視頻上將虛擬標(biāo)記投送到遠(yuǎn)程智能穿戴設(shè)備屏幕上,方便遠(yuǎn)端人員進(jìn)行位置定位指引,將傳統(tǒng)視頻通話提升為雙向協(xié)作指導(dǎo)交互。
4)凍屏標(biāo)繪:具備凍圖標(biāo)繪功能,可截取視頻畫(huà)面,專(zhuān)家在截取畫(huà)面上進(jìn)行自由標(biāo)注繪制,并實(shí)時(shí)顯示給現(xiàn)場(chǎng)。
5)圖文發(fā)送:具備文字、圖片推送功能,專(zhuān)家可以推送文字、圖片給前端現(xiàn)場(chǎng)人員。
6)圖片縮放:智能穿戴設(shè)備端軟件接收語(yǔ)音控制圖片的縮放,便于現(xiàn)場(chǎng)人員查看圖片細(xì)節(jié)。
7)即時(shí)拍照、錄像:智能穿戴設(shè)備支持即時(shí)拍照、錄音、錄像。
8)賬戶(hù)管理:具有用戶(hù)與專(zhuān)家賬戶(hù)系統(tǒng),便于企業(yè)建立現(xiàn)場(chǎng)人員與專(zhuān)家用戶(hù)系統(tǒng)。
9)多終端支持:系統(tǒng)軟件包含現(xiàn)場(chǎng)端、專(zhuān)家端。
10)語(yǔ)音控制交互:具備離線語(yǔ)音識(shí)別技術(shù),語(yǔ)音可轉(zhuǎn)化為文字。