视频质量AI智能分析诊断系统解决方案建设思路与设计

一、建设背景

随着安防视频覆盖日趋完善，视频在安全管理等方面发挥了不可替代的作用，但在使用过程中仍然存在视频掉线、视频人为遮挡、视频录像存储时长不足等问题，存在较大的安全隐患。

1）视频在安全生产管理上作用日趋凸显，视频质量需长期保障

受环境、老化、网络、供电、人为等多方面因素影响，摄像头容易出现掉线、录像缺失、视频调阅失败以及图像画面异常（颜色异常、监控视角异常、图像虚焦模糊、监控镜头脏污、视频图像遮挡、视频图像花屏）等问题。

2）视频体量大、人力有限，需要自动化检测手段

传统的视频质量问题，往往依赖人力进行视频浏览巡检，随着视频规模逐渐增大，人力巡检的方式往往无法满足需要；而原有视频运维平台存在准确率低、异常提醒滞后等问题，有必要利用视频AI的能力进行自动化的视频巡检，提升发现问题的效率。

二、方案介绍

1、方案架构

1）前端感知层：新建和存量视频资源，包括NVR、摄像机以及视频汇聚EasyCVR视频监控平台，支持GB/T28181、ONVIF、海康/大华/宇视等主流设备厂商私有SDK协议。

2）能力支撑层：系统提供视频汇聚中台（EasyCVR）、视频AI中台（TSINGSEE青犀AI算法中台），实现视频的汇聚、AI智能分析等，为系统应用提供能力支撑。

3）系统应用层：根据巡检业务需求，提供设备状态巡检、录像状态巡检、图像质量诊断分析、告警通知等实战应用。

2、视频质量诊断智能检测

1）画面异常AI检测算法

检测由于摄像机故障、解码库不匹配、视频传输网络等原因导致的视频图像画面呈现出花屏、黑屏、灰屏、绿屏、蓝屏或者半屏杂色覆盖的视频画面异常现象。TSINGSEE青犀AI算法中台画面异常检测算法支持检测支持识别画面黑屏、灰屏、白屏、绿屏、蓝屏、花屏，镜头有遮挡、有污染，以及摄像机角度异常等情况。

2）告警上报

当检测到视频画面异常时，系统将立即抓拍并发出告警，同时推送告警消息至管理人员，如：短信、语音、邮件等方式，便于管理人员及时查看和处理。TSINGSEE青犀AI算法中台支持查看异常告警详情，包括算法任务基本信息、异常画面、告警详情等信息；支持根据算法任务类型、推送状态、日期等条件进行筛选查看。

3、设备状态检测

视频汇聚/安防监控EasyCVR视频融合平台可以对系统及设备的运行状态进行监测与数据统计；可通过信令进行设备的在线/离线状态进行检测统计，同时对每一路视频流进行拉取检测，判断设备是否可正常进行视频实时浏览。

4、视频融合汇聚管理

AI视频智能分析/视频监控管理平台EasyCVR视频融合平台基于云边端架构，可支持海量视频汇聚管理，能提供视频监控直播、云端录像、云存储、录像检索与回看、智能告警、平台级联、智能分析等视频服务。平台支持设备通过4G、5G、WIFI、有线等方式接入，支持多协议、多类型设备接入，包括：国标GB/T28181协议、RTMP、RTSP/Onvif协议、海康Ehome、海康SDK、大华SDK、华为SDK、宇视SDK、乐橙SDK、萤石云SDK等。

经平台接入的视频流能实现多格式分发，包括：RTMP、RTSP、HTTP-FLV、WebSocket-FLV、HLS、WebRTC、ws-fmp4、http-fmp4等，支持在手机、电脑、电子大屏、电视墙、小程序/微信端等多终端上展示与浏览。为了便于用户二次开发、集成与调用，我们也提供了丰富的API接口供用户使用，有需要的用户可以查看官方API文档。