王金桥：新兴热点前沿“视频行为识别”，为“智慧能源安全生产”提供坚实保障

2月8日上午，由中国科学院科技战略咨询研究院、中国科学院文献情报中心与科睿唯安联合举办的“2021研究前沿发布暨研讨会”在北京举行，会上向全球发布《2021研究前沿》报告和《2021研究前沿热度指数》报告。中国科学院院士、中国疾病预防控制中心主任高福，中国科学院院士、清华大学化学系教授王梅祥，中国科学院自动化研究所研究员、中科视语董事长王金桥作为报告嘉宾出席会议，同时，王金桥发表《视频行为识别研究进展与应用前景探讨》报告。

王金桥介绍，《2021研究前沿》报告显示，2021研究前沿在信息科学领域，“视频行为识别研究”进入Top10热点前沿。在当今这样一个数字化、网络化、智能化、云化的时代，海量的视频数据通过AI催生了大量的时序模型，行为识别的研究和应用进入了爆发式增长阶段，将为多个行业赋能。视频行为识别有着广泛的应用场景和社会经济价值，包括智能监控、健康养老、运动分析、虚拟现实、基于内容的检索、医疗诊断以及视频会议等。在工业生产、危化品操作、重工制造、电力操作等场景已经凸显出重要的应用价值，也对维护国家和公共安全有重要意义。

“智慧安全管理”的重要力量

“视频行为检测与识别是提高安全生产智能化水平的重要手段，融合了计算机视觉、模式识别、心理学、生理学等多项技术”。王金桥表示，近十年来，行为识别数据集的规模不断扩大，同时行为识别经历了从2D卷积神经网络、双流网络、3D卷积神经网络、高效时空建模、时空Transformer等算法演化的几个阶段，从表观特征、运动信息、时空建模、多模态等多个维度取得了关键性的进展。

目前，国际上许多高校与研究机构，如麻省理工学院、斯坦福大学、谷歌以及Facebook人工智能实验室等，都专门有针对目标检测、行为识别方向的研究组或实验室，国内外许多专家学者目标检测与行为识别算法进行了深入的研究并取得卓有成效的进展，同时各国政府和高等学院也在该领域投入了科研项目，并成功地投入到实际应用场景中。可以看出，目前国家已高度重视该研究领域，并在逐渐增加该领域的投入和支持力度。

王金桥介绍，行为识别与分析技术目前在能源安全施工场景发挥着巨大的作用，基于大规模“异常行为”数据的识别与训练，配合现场摄像头，自动监控施工等特殊环境下的异常行为，实时监测现场并对异常事件实时报警，如基于二维图像的识别的“未戴安全帽、未穿工服、配电箱打开、抽烟、打电话、倒地、打斗、入侵检测、安全员离岗”等异常行为监测。

以及基于三维三点云图像识别的“动土安全、动火安全、吊臂作业、高处作业、起重物站人、起重作业、上下交叉作业”等行为分析与监测等，变被动“监督”为主动“监控”，真正做到事前预警，事中常态检测，事后规范管理，将安全生产做到信息化管理，筑牢安全生产防线，助力安全生产智能化升级。

新兴热点前沿“视频行为识别”技术为能源安全生产提供保障

王金桥介绍，视语团队的“AI安全生产监管解决方案”，基于视语自研的AI视觉识别与大数据处理技术、与新兴热点前沿“视频行为识别技术”相结合，从生产过程中的远程安全监管业务需求出发，集实时视频结构化信息提取与分析、生产异常事件报警、业务事件闭环管理、数据可视化展示等功能于一体的高性能软硬一体化解决方案，为相关企业确保安全生产作业、防范安全事故提供可靠高效的技术手段。

同时，视语推出系列AI安全生产智慧守护平台，筑牢安全生产防线，助力安全生产智能化升级。

如油田安全生产智慧守护平台，采用多维混合感知技术对能源安全生产中的采油生产、工程施工、三标管理等任务提供智能化监管服务，运用视语自研AI算法技术实现采油机盘根漏油、驴头停机、配电箱常开、明火、人车滞留、动火/动土/起重/高处工程作业不规范等多种异常的智能预警，助力能源企业加强安全管控，为工作决策提供强有力的数据支持，实现安全事件数据向实际利益的转化过程，赋能产业升级。

AI智慧安全监管综合治理平台，从施工安全管理实际需求出发，将视语自研的视觉识别算法和施工安全监管的工作深度融合，为施工监理单位提供数智化管理解决方案，强化施工安全管理能力的同时让施工安全管理工作压力得到缓解，解决传统人治方式的低效问题。施工期内异常情况信息与取证图像自动推送给管理者，供监管人员决策调度，实现“事前及时预警”、“事中及时报警”、“事后快速取证”，从而有效避免损失，保护人员及财产安全。