隨着網絡升級,AR/VR等遠程視頻協助交互的功能需求增多,最近有就電力系統的客戶需要把AR眼鏡接到視頻會議和視頻直播平台下面,便於管理和遠程協助。由於客戶原來就用了亮亮視野的AR眼鏡,為了兼容性只要針對性開發。
總體架構圖:
分析:
1,AR眼鏡和UVC設備都是type-c接口,目前android支持並不好,都要專門sdk,和uvc驅動,我用了UVCCamera驅動設備。
2,目前主流互動用都rtc方案,這個主要是方便接入Web平台互動,因此要把你的會議或平台支持Rtc接入,由於我們是MCU會議系統,這邊有專門改造的SIP信令平台,支持RTC接入傳統SIP會議系統。
3,難點是RTC對攝像頭的取流和打包傳輸,針對uvc的流重新整理編譯了了sdk庫,對平台兼容和流排序做了處理,也對AR眼鏡的sdk進程了封裝。
總結:針對type-c的視頻流有專門有驅動改造和sdk配合,對Rtc要較深入的了解它的封包機制,引用本身的傳輸模塊。
總體效果:
測試演示: https://w.ovmeet.com:9301/ovmeetar/login.html