AR眼镜通用操作系统 南京邮电大学俞晓帆教授科研团队最新研发了一款AR眼镜通用操作系统,可以为所有国产AR眼镜提供一个统一的、通用的眼镜端操作系统和PC端应用软件平台。经测试,该系统支持现有全部国产AR眼镜,并运行稳定。同时,该系统能够适配国产化软硬件环境,包括鲲鹏ARM处理器、银河麒麟操作系统、达梦数据库和东方通TONGWEB WEB服务器。
南京邮电大学俞晓帆教授科研团队还研发了一套基于人工智能(AI)和增强现实(AR)生态环境非现场执法平台,受到了生态环境部门的广泛关注。 被监管的排污企业员工可以穿戴AR眼镜,通过5G接入人工智能生态环境执法平台,变身为“生态环境监督员”,在厂区内代替生态环境执法人员进行每日巡查。
AR眼镜在巡检过程中实时录制视频并将与GPS定位信息绑定的视频和图片同步上传至生态环境执法云平台,以供生态环境执法队员查看。 在巡检过程中,AR眼镜通过人工智能对所有污染处理设备的仪器仪表、开关、旋钮、灯光状态、数据进行实时自动捕捉、抓取、识别、判断,自动记录其仪器仪表的数据和图像,并与后台预设的正常值进行比对。如果判断为异常,则人工智能自动对违法行为进行识别、筛查,并向执法人员报告异常情况。 生态环境执法人员收到警报后通过AR眼镜和排污企业进行远程呼叫。远程视频接通后,生态环境执法队员通过排污企业负责人佩戴的AR眼镜进行非现场远程巡查,并同步录制执法视频。
AR眼镜硬件厂商无须再组建软件团队,可以直接使用该通用操作系统,并以此为基础完成各类应用开发。 系统支持多种AR眼镜硬件,包括但不限于谷东科技H400、亮亮视野、虹科M400、锐欧威尔CIMO和奇点临近等型号。 AR操作系统适用于多个工业行业,如石化、电力、能源、建筑、航空、轨道交通、重工和消防等。在具体业务场景中,它可以用于设备维修、运维、培训、远程会商、安全检查、危险现场记录等多种应用。
基于AR眼镜操作系统,南京邮电大学俞晓帆教授科研团队深入开发完成了多款PC端应用软件,具备基础和高级功能。基础功能包括拍照与视频录制、GPS绑定图片和视频定位、视频回放、GPS轨迹查看、文件和图片浏览、远程协助视频通话、扫码点检以及支持私有化部署等。高级功能则涵盖了国产化环境适配、演示白板、任务与流程的发布和管理、空间标注、入网管理等。
如确定排污设备状态异常,则人工智能自动检测的数据信息和两次录制的视频可形成较为完整的违法证据链,从而完成了生态环境非现场执法。 通过人工智能的“撒豆成兵”,大大提高了生态环境执法的效率、覆盖率和巡查频率,将显著降低违法排污行为,真正实现了生态环境非现场执法。企业通过自我监督减少了违规风险,执法人员对企业无事不扰,优化了营商环境,也整体提升了生态环境治理水平
系统还集成了多种人工智能功能,如语音识别与交互、语义分割、OCR识别、空间定位、三维物体识别、视觉融合、手势识别、行为识别,以及专门针对工业设备的人工智能巡检识别算法。