项目描述:盲人戴上双目摄像头的头盔,在室内,室外,有障碍物的场景,通过4G网络传输至云端,经过人工智能算法的辅助以及后台人工的辅助,语音提醒,实现自主走路。
项目职责:
1)媒体服务器,WebRTC信令服务器的呼叫切换,打洞,docker部署等等。
2)机器视觉算法的集成
3)导航标注的视频AR的集成
项目业绩:
1)WebRTC视频流与机器视觉算法的并行流水线集成,0->1的突破。直接导致META导盲机器人的demo版本的诞生[如果不是我投入了大量的沟通成本和能量,集成AI算法的设想根本不可能在短期内完成技术的落地]。从此公司在国内外各大展会展示,次数大概不下于50次。
2)WebRTC视频呼叫的信令切换,使得人工服务和人工智能服务器的来回切换的设想(HARI)最终得到技术的落地。【AI算法识别效果差就自动切换人工后台服务】
3)WebRTC视频流内渲染3D的导航箭头标注。使得演示效果很有科技感
4)实现媒体服务器的公网部署,打洞,docker容器。