背景

在公(gōng)安(ān)信息化建设深入开展的背景下，现有(yǒu)视频监控系统存在着缺乏深度应用(yòng)的问题，其应用(yòng)瓶颈在于如何高效提取有(yǒu)效视频信息，实现信息关联和自定义检索功能(néng)。解决这一问题的核心是图像结构化技(jì )术。用(yòng)图像结构化技(jì )术提升公(gōng)安(ān)在视频侦查和破案方面的效能(néng)，使之成為(wèi)新(xīn)一代的智慧化、语义化、情报化的视频处理(lǐ)工(gōng)具(jù)系统。针对泛卡口的视频实时结构化、大数据应用(yòng)是未来平安(ān)城市建设的一个重要方向。

 图像结构化建设现状

 相关技(jì )术介绍

• 車(chē)辆特征二次识别技(jì )术——基于“深度學(xué)习”的車(chē)辆特征识别技(jì )术，支持車(chē)型，車(chē)款，車(chē)身颜色识别，以及車(chē)牌识别；可(kě)检测年检标、遮阳板、纸巾盒、挂件、摆件、安(ān)全带等。

• 图像结构化技(jì )术——一种视频内容信息提取技(jì )术，它对视频内容按照语义关系以时空分(fēn)割、特征提取、对象识别等方式处理(lǐ)，从而组织成可(kě)供计算机和人理(lǐ)解的文(wén)本信息的技(jì )术。

 

方案概述

英飞拓图像结构化智能(néng)检索平台采用(yòng)以“深度學(xué)习”為(wèi)核心的图像识别技(jì )术，能(néng)够实时对摄像机的视频流和图片进行特征判断，并能(néng)提取摄像机录像文(wén)件中(zhōng)的人、車(chē)、非机动車(chē)信息，对海量视频数据经过结构化引擎处理(lǐ)，基于云存储技(jì )术构建大数据平台，基于数据挖掘技(jì )术构建应用(yòng)平台，实现视频图片的智能(néng)检索、数据应用(yòng)等功能(néng)。

平台采用(yòng)分(fēn)布式架构，以视频监控為(wèi)中(zhōng)心，通过横向扩展、纵向级联获取视频图像，实现行人特征二次识别、車(chē)辆特征二次识别及图像结构化分(fēn)析等功能(néng)。同时，平台可(kě)与GIS系统对接，实现車(chē)辆轨迹分(fēn)析、频繁过車(chē)分(fēn)析等功能(néng)。

 

方案拓扑图

英飞拓图像结构化智能(néng)检索平台集成了6大功能(néng)

• 实时监控

• 录像分(fēn)析

• 人車(chē)二次识别

• 人車(chē)综合检索

• 数据统计分(fēn)析

• 電(diàn)子地图对接

 

系统图

 

方案特点

• 采用(yòng)深度學(xué)习方式，車(chē)辆识别率达到95%，行人识别率达到95%

• 离線(xiàn)与实时录像结构化分(fēn)析

• 目标特征检索，以图搜图功能(néng)

• 检索数据统计分(fēn)析功能(néng)

• 車(chē)辆轨迹查询，行車(chē)规律分(fēn)析

車(chē)辆识别

• 识别13种車(chē)牌

系统按照GA36-2014标准进行设计，支持多(duō)达13种类型車(chē)牌的号码识别，包括：小(xiǎo)型汽車(chē)号牌、大型汽車(chē)号牌、挂車(chē)号牌、使馆汽車(chē)号牌、领馆汽車(chē)号牌、香港入出境車(chē)号牌、澳门入出境車(chē)号牌、教练汽車(chē)号牌、警用(yòng)汽車(chē)号牌、低速車(chē)号牌、临时行驶車(chē)号牌、临时入境汽車(chē)号牌、拖拉机号牌。

 

• 识别13种車(chē)身颜色

黑、白、蓝、黄、橙、绿、红、紫 、灰、青、棕、银、粉

 

• 识别21种車(chē)型

支持的車(chē)型：轿車(chē)、越野車(chē)、商(shāng)務(wù)車(chē)、小(xiǎo)型货車(chē)、大型货車(chē)、轻客、小(xiǎo)型客車(chē)、大型客車(chē)、三轮車(chē)、微面、皮卡、挂車(chē)、混泥土搅拌車(chē)、罐車(chē)、随車(chē)吊、消防車(chē)、渣土車(chē)、押运車(chē)、工(gōng)程抢修車(chē)、救援車(chē)、栏板卡車(chē)等。

 

• 识别5500多(duō)种車(chē)款

系统支持車(chē)辆三级品牌（品牌、車(chē)系和款型）识别，包括200种以上的車(chē)辆品牌识别。在识别車(chē)辆品牌的基础上，支持近千种車(chē)辆系列的识别，支持子型号数量大于5500个，达到國(guó)内领先水平。

• 特有(yǒu)的安(ān)全带、打電(diàn)话、危化品車(chē)辆、行李架、天窗、备胎识别能(néng)力

系统支持对安(ān)全带、打電(diàn)话、危化品車(chē)辆、行李架、天窗和备胎的识别检测

 人脸识别

• 识别16种行人特征

支持识别行人年龄、性别、上衣颜色、上衣款式、上衣纹理(lǐ)、下衣颜色、下衣款式、发型、眼镜、帽子、朝向、口罩、背包、是否拎东西、是否拉杆箱、是否使用(yòng)手推車(chē)等16种结构化特征信息。

 方案功能(néng)

实时监控

系统实时抓拍视频源内的机动車(chē)、非机动車(chē)、行人图片，实时展示结构化分(fēn)析结果

 录像分(fēn)析

支持对用(yòng)户上传的离線(xiàn)录像进行分(fēn)析。

 综合检索

支持行人、机动車(chē)、非机动車(chē)结构特征智能(néng)检索。通过提交目标的部分(fēn)结构化特征信息，系统能(néng)通过相关的特征信息将目标定位到一定范围。

 以图搜图

支持自定义上传行人、人骑車(chē)、車(chē)辆、人脸图片，并基于上传图像内目标的全面或局部特征对目标进行有(yǒu)效检索，在短时间内锁定其行踪。

 统计分(fēn)析

支持对日/周/月/年的检索数据进行统计分(fēn)析。

 電(diàn)子地图

通过電(diàn)子地图实现监控点调看、设置、报警联动等，支持频繁过車(chē)分(fēn)析，行車(chē)规律分(fēn)析，行人和車(chē)辆的轨迹显示，并通过方向、速度、经过时间综合计算，生成轨迹存入轨迹库，对轨迹进行管理(lǐ)。