SkeyeVSS视频共享融合赋能平台技术方案之AI视频智能分析中台子系统需求分析

AI视频智能分析中台子系统解决方案

1.1 AI平台用户需求分析

1. 建设具备视频智能识别能力的AI能力平台

SkeyeVSS平台提供视频分析策略管理、预警策略管理等功能，能够主动发现集团成员企业生产过程中存在安全隐患的通用场景，包括空岗、睡岗、人员数量超限、安全帽佩戴、护目镜佩戴、吊装作业区域人员活动、禁火区域烟火、禁止人员进入、乱堆物料、消防通道占用等共十个场景，支持生成通过识别以上场景形成的预警录像。

2. 实现对物联网平台推送的视频资源进行联网整合

针对上层应用系统提供统一的功能接口，符合公安部的《安全防范视频监控联网系统信息传输、交换、控制技术要求》（GB/T 28181-2016），满足业务系统对视频数据接入转发的联网共享需求，提供平台管理、设备管理和目录管理功能。

3. 视图库即视频图像信息数据库

以视频片段、抓拍图像、预警事件对象为核心，实现数据整合汇聚，建立数据分类存储模型，打造视频图像数据资源池，实现结构化的目标数据的存储与检索，为上层平台提供数据资源，从而完成整个视图数据的共享服务，提供抓拍库、轨迹库和结果库管理功能。

4. 通过对海量视频图片数据进行分析，对视频图像中的各类事件问题自动分析、抓拍

可做到主动预警，从以往“被动”监控升级为主动智能分析预警，推送预警数据到业务系统，从而更有效地协助处理各类事件。

5. 视频分析场景

①　空岗检测

通过接入集团重点岗位的监控影像，利用AI分析能力对重点岗位是否存在人员未到岗、离岗的现象进行检测判断，并将空岗预警信息及时推送给监管人员进行人工审核和处理。

②　睡岗检测

汇集集团中控室等重点岗位的监控影像，利用AI分析能力对重点岗位是否存在人员睡岗事件进行检测判断，并将睡岗预警信息及时推送给监管人员进行人工审核和处理。

③　人员数量超限检测

针对有人员数量限制的工作区域监控影像，利用AI分析能力对该类区域的监控视频进行是否存在人员数量超限的现象进行检测判断，并将超限预警信息及时推送给监管人员进行人工审核和处理。

④　安全帽佩戴作业检测

针对有坠落物等登高危险作业区监控影像，利用AI分析能力对作业区域内工作人员的安全帽佩戴情况进行检测判断，发现未佩戴记录抓拍未佩戴安全帽的图像并通知监管人员进行人工审核和处理。

⑤　护目镜佩戴作业检测

针对有飞溅作业的工段场所监控影像，利用AI能力分析监控区域内是否存在人员未佩戴护目镜的现象进行检测，将画面进行截取后生成预警信息推送给监管人员进行人工审核和处理。

⑥　吊装作业区域人员活动检测

针对有吊装作业的工作区域监控影像，利用AI分析能力对区域内是否有疑似人员活动的现象进行检测判断，并将疑似人员活动现象生成预警信息及时推送给监管人员进行人工审核和处理。

⑦　禁火区域检测

针对明令禁火的区域场所监控影像，利用AI分析能力对区域内是否存在抽烟、烟火现象进行检测判断，将画面进行截取后生成预警信息推送给监管人员进行人工审核和处理。

⑧　禁止人员进入检测

针对禁止人员进入的重大风险源等区域监控影像，利用AI能力分析该区域是否存在人员进入现象进行检测判断，产生人员区域入侵事件时触发预警并抓拍场景图片推送给监管人员进行人工审核和处理。

⑨　乱堆物料检测

针对原材料、成品堆场等区域，利用AI能力物料堆放超出界限现象，并把预警信息快速推送给相应的管理人员，通知工作人员及时处理。

⑩　消防通道占用检测

针对消防通道区域监控影像，利用AI能力分析区域内机动车及非机动车占用情况，若机动车或非机动车停留时间超过指定时间，则判定存在占用消防通道行为并生成预警信息推送给监管人员进行人工审核和处理。

6. 视频分析管理：

①　场景管理

支持用户创建视频分析任务，用户可查询视频智能分析产生的预警结果数据，提供预警事件、监控点、监控点预警数统计功能，分析任务的执行历史记录可查看，用户可通过人工上报模块上报预警事件。

②　设备管理

对监控设备以及设备目录结构进行统一管理，提供用户对监控设备增删改查的功能。

③　策略管理

对视频分析任务的执行调度计划进行统一管理和配置，支持创建视频分析任务时设置分析任务的执行调度计划，同时可根据业务场景设置报预警的策略类型，包括预警周期内产生事件后预警、连续发生多次事件后预警和预警周期内按连续或最少的频率出现事件后预警。

④　人脸库管理

人脸库管理提供对人脸库、用户、人脸的多维管理。

⑤　平台管理

提供服务管理以及平台个性化配置功能。

7. AI平台的需求

针对监控视频路数较多、识别场景需求较强的企业，建设AI能力平台，该能力平台与部署于西南公司监控中心安全环保监控平台的AI能力平台相同，除内嵌空岗报警、睡岗监测、工装监测、人员数量监测、安全帽佩戴作业监测、护目镜佩戴作业监测、吊装作业区域检测、禁火区域监测、禁止人员进入区域监测、乱堆物料监测共十个场景识别能力外，平台具备识别任务策略制定、视图库管理、基础视频管理等能力。平台支持AI场景的弹性扩展，西南公司监控中心AI能力平台后续增添新的场景识别能力时可进行授权使用，不受并发路数限制, 默认支持45路视频并发；软硬件解藕，可靠性高。

8. AI边缘计算网关算法盒子

针对监控视频路数较少、识别场景需求较弱，采用固定的AI场景一体机的方式进行建设，每台设备最多支持30路视频并发。一体机内置与西南公司监控中心安全环保监控平台AI能力平台相同的场景识别能力以及GPU、CPU、内存等算力资源组成的服务器，包括空岗报警、睡岗监测、工装监测、人员数量监测、安全帽佩戴作业监测、护目镜佩戴作业监测、吊装作业区域检测、禁火区域监测、禁止人员进入区域监测、乱堆物料监测共十个场景。该盒子的技术参数配置如下所示：

①　2U标准机架式，冗余电源；

②　CPU：配置CPU个数≥2，每颗CPU≥2.0Hz；

③　内存：≥64GB；

④　GPU：NIVIDA T4*2

⑤　存储：8TB HDD≥2；

⑥　千兆电口：≥2；

⑦　分析能力：不少于36路视频实时分析（1080P，25fps）

⑧　内置算法包括但不限于：空岗报警、睡岗监测、工装监测、人员数量监测、安全帽佩戴作业监测、护目镜佩戴作业监测、吊装作业区域检测、禁火区域监测、禁止人员进入区域监测、乱堆物料监测。