东方网力视频图像解析系统

近年，随着 “平安城市”系统的深度建设，极大地促进了治安防控工作的发展。同时，伴随着视频智能安防系统建设的力度和规模不断扩大，使用领域不断拓展，涉及的视频图像以及其他监控资源应用越来越多，如何才能将多种不同来源的数据有效整合、充分发掘其中的价值，是摆在行业面前的问题。

为了解决上述问题，除统一标准和科学规划外，需要拿出切实可行的解决方案，而东方网力适时推出了视频图像解析系统。其以整合现有城市报警与监控资源为基础，密切联系公共安全应用需求，通过运用高清监控、GPS/GIS、智能分析、云计算、云存储、云检索、大数据等先进技术，提供开放的视频云框架，建设统一开放的视频云服务软件体系，最大程度地实现平安城市监控系统的技术升级、应用升级和功能升级。

使得用户可以根据自身业务需求进行合理的服务组合来满足实战需求，以建设一个先进、稳定、可靠、可扩展的视频作战中心，进行视频图像智能分析、人像比对、车辆分析等视频图像深度应用，形成以视频块数据为基础，长期保存重要信息的应用模式，为用户提供视频图像综合应用服务，解决了视频图像信息汇聚整合力度不够和综合应用深度不够等问题。

架构成熟 技术先进

东方网力视频图像解析系统应用是典型的三层逻辑结构，而实际应用的物理部署多是双网架构。

典型三层逻辑

资源层：依托视频专网以及其他网络，对城市的重点道路、卡口、场所、住地等区域，以及物联网感知设备，实现环境监控信息采集、人员车辆视图采集、定位信息采集等。平台能兼容行业内各主流品牌摄像机、车辆和人像卡口设备、RFID设备、证件感知设备、移动终端、GPS、视频会议、无人机等。依托东方网力视云联网平台，基于开放的接口标准，实现对互联网、移动警务网、视频专网多种非结构化数据，并通过数据标准化转换，实现数据标准的统一，为大数据平台提供基础的数据。

数据服务层：以视频云存储、视频云计算、大数据基础服务为支撑，通过整合车辆和人脸数据、电磁轨迹、事件信息等数据，建立视图资源服务平台，提供以视频大数据存储服务、视频图像分析服务、大数据分析服务为基础，视频大数据与其它多种数据碰撞挖掘的方式，为上层应用平台提供开放、高效的多资源数据共享与分析服务。

应用层：结合公安多警种不同的业务需求，实现事前防控、事中指挥、事后研判的立体化防控应用。

八大关键技术支撑

东方网力视图解析系统基于物联网多维感知数据整合技术、分布式数据库技术、视图智能分析技术、多算法融合技术、视频图像聚类技术、数据挖掘技术、微服务架构技术、地图服务引擎技术等八大关键技术，实现解析技术重大突破。

★物联网多维感知数据整合技术

平台除了接入各类视频、卡口、人像、RFID、GPS信息外，还充分整合了物联网感知数据，实现与各类视图数据资源的整合、标准化和汇聚处理，为各类业务系统灵活应用提供了强大的大数据支撑。

★分布式数据库技术

在海量数据汇聚后，数据库选型和规划具有决定性意义。通过对应用层数据业务进行分析，系统支持关系型数据库与分布式数据库。在图像整合业务上，主要采用关系型数据库；在面向视频综合应用业务的云架构上采用分析型数据库。

★基于深度学习的视图智能分析技术

将基于深度学习特征比对技术应用于视图特征比对检索中，形成针对人脸、人体、机动和非机动车辆的正向以图搜图和反向排除技术。

★多算法融合技术

针对多种系统、多个厂家、多种视图智能分析算法，提供视图信息的汇聚、融合与数据挖掘的技术支撑。东方网力多算法融合技术从实战应用效果和视图数据应用价值最大化出发，提供面向不同厂家算法的协同调度与数据融合处理能力，为视图检索及分析提供强大的技术支撑。

★视频图像聚类技术

东方网力通过视频图像聚类技术，对采集、接入的各类视图数据，进行视图二次结构化处理，可为后续的查询服务提供准确快速的查询结果，并且平台通过先进的大数据技术，实现千亿级数据快速响应，将数据服务于实战，体现数据潜在价值，发挥了视频大数据平台的作用。

★数据挖掘技术

数据挖掘技术通过对视频图像数据资源抽取出有意义的、潜在有用的信息和知识，并进行提炼，可以基于综合业务应用，对未来做出一个较为完整、合理、准确的分析和预测。

★微服务架构技术

微服务是一种软件架构，由API网关、服务管理中心、多业务服务群三部分组成。API 网关封装内部系统的架构，并且提供 API 给各个客户端，通过API网关对外提供相应的服务。

★地图服务引擎技术

东方网力的NPGIS具有高度的兼容能力，支持主流地图引擎；海量兴趣点快速汇聚展示能力，是主流地图的2倍以上；丰富的资源搜索能力，实现周边资源、商圈、兴趣点的搜索能力；丰富的地图应用能力，提供地图缩放、截图、路网分析、路径规划导航等应用支撑。

完备的自动化分析服务调度

东方网力的视频图像解析系统的自动化分析服务调度是面对海量数据的全结构化处理，正因为具有如下功能特点，而有别于其它平台系统。

1系统兼容并遵循《 GA/T 1399公安视频图像分析系统》和《GA/T 1400公安视频图像信息应用系统》等标准，提供不同厂家、不同终端、不同视图资源类型的标准化和非标准化的接入、汇聚、整合、共享分发与应用服务。

2公共安全视图资源和社会公共视图资源的整合与服务能力，系统构建了以人、车、物、案事件为核心的视图大数据服务体系，接入并整合了各类公共安全视图资源、社会化资源和其他感知识别资源，为公共安全及社会化应用提供全面的服务与支撑。

3基于深度学习的视频智能识别与分析应用，充分利用CPU+GPU协同计算能力实现资源动态调配，采用先进的智能分析技术，自动提取实时/历史/文件视频图像中有价值的人体、人脸和车辆细节特征，对目标类型、颜色等形成结构化描述，为事前、事中、事后的事件布防、综合布控、研判分析提供数据基础，保证信息查找检索的高效性，提高了视频的应用效率。

4建立了健全的检索体系，通过全文检索的方式实现全部资源及关联资源对象的检索查看能力，检索可包括车辆、人脸、人体，及以图搜图、资源检索等，其车辆检索又分可按照条件进行多维搜车和特征搜车。特别指出，其资源检索能提供基于设备和位置的检索功能，实现对摄像机、车辆卡口、人脸卡口、出租车、GPS等设备的综合检索，方便设备位置查找;并可对不同类别设备进行批量操作，通过查人、找车功能，实现数据检索分析。

5系统还能建立数据仓库，可实现对系统中所有的各类资源进行一个集中管理。可以分别查看各类资源，包括车辆、人脸、人体等。针对每种资源的每个视频图片，都可检索和查看详情。

跨网跨域数据共享

东方网力的视频图像解析系统具有强大的跨网跨域共享功能，其在网内，有一点查询就能实现全网响应的多级视图大数据级联应用。基于各级视频图像解析系统，能够提供跨区域、跨网段、跨系统的省、市、县多级联网的资源布控与资源检索，具有一点查询或布控，全网响应的级联应用服务能力。

多数据融合应用

多种视图数据的融合应用是东方网力视频图像解析系统最重要的功能，其实施类型很多，主要如综合布控、连环技战法和一张地图上作战等。

1

综合布控

针对同一时空范围同类单个或多个、同一目标的多个维度、多类目标多个维度的综合化、立体化、多维度的布控检测与预警能力。

针对车辆、人脸、RFID、移动终端等视图对象中某一种对象的布控，将布控指令下发至相应对象种类的终端，对于符合布控规则的目标给出实时报警提醒。如针对全国在逃人员，全国被盗抢车辆在本市区内进行布控，发现嫌疑对象后可立即通知相关人员。系统可对同一目标的多维布控，也可对不同目标、同一时空区域的立体化布控。

2

连环技战法

单一技战法在实战中不能充分发挥威力，而采用多种技战法组合，可以形成连环技战法。连环技战法有诸多优点，可以无缝衔接多数据的研判技战法，上一个技战法的输出即是下一个技战法的输入，可以确保侦查思路不中断；可以保留每一步的研判结果，做到线索研判过程和结果的可追溯、可回滚、可灵活调整侦查思路；自动记录操作过程，通过大量数据可以形成新的研判模型，并可发挥广大一线民警的智慧和力量，不断丰富技战法库。

3

一张地图上作战

系统具有以地图为中心的资源时空一体化指挥与作战能力，其整合地图可视化与大数据检索分析，将各类资源时空信息与数据分析应用融入到地图中，提供时空一体化的指挥与作战能力。从而形成以地图为核心的可视化指挥调度应用，实现警力调度、确定警卫路线、建立防控圈、进行全景追逃等，以实现综合化、立体化、多维度的信息布控。

其它多数据融合应用例子还很多，比如：以多维数据为核心的时空研判应用、基于多种视图大数据的全文检索与以图搜图、跨场景多摄像机的人体目标轨迹追踪、视图大数据碰撞分析与关系挖掘应用、面向多种视图数据的连环技战法应用、以人脸为核心的人像应用、以车辆为核心的车辆大数据应用等等。

智能检索结果展现

由于将传统视频监控应用模式从“看视频”向“搜视频”转变，所以如何展示检索结果是非常重要的功能，其主要特点如下。

1

应用更直接：

用户查找目标线索只需根据关心的数据类型查找即可，图层中将支持按照具有的车辆、人脸、人体的搜索能力进行直接搜索查找。

2

各类采集信息的集中展示：

如对摄像机、车辆卡口、人脸卡口、出租车、GPS等设备资源与信息的深度整合，提供海量数据在地图中的展现及应用。并可借助大数据分析，结合语音对讲，GPS定位等手段实现面向侦查、指挥调度综合业务的可视化时空作战。

3

充分应用地图工具：

支持切换市、区、县、放大、缩小、全屏、关闭、漫游等;支持在地图中线选（如有路网，支持按照路网生成轨迹；按照多点连线生成轨迹）、框选、圈选资源，并对选择的资源进行分类展示，支持对设备自动选择，进行批量查询、下载录像功能，批量检索人、车信息操作。

4

数据实时展现：

实现人脸、车辆、人体等采集数据的实时动态展现，展现信息包括图片、采集时间、采集地点等。同时针对具有结构化能力的单路摄像机，支持显示当前实时结构化结果及数据。

平台主要特色

1

精准的视图智能分析处理能力：

基于深度学习的人员、车辆、物品智能识别算法，提供高效的视图内容自动化提取分析与识别解析能力。自动提取实时/历史/文件视频图像中有价值的人体、人脸和车辆的细节特征信息，对目标类型、颜色等形成结构化描述，为事前、事中、事后的事件布防、综合布控、研判分析提供数据基础。

2

快捷的大数据检索与数据挖掘能力：

针对视频大数据下的海量视图信息，能够进行多种数据融合碰撞，结合案件等信息提升资源整体价值，提供千亿级数据处理能力。

3

多种业务应用的服务与共享能力：

根据业务需求，系统实现了多种技战法及业务分析应用，并提供跨区域、跨网段、跨系统的省、市、县多级联网的资源布控与资源检索应用，为反恐维稳、指挥处置、治安反恐、侦查破案、公共安全、执法监督、服务民生等应用服务提供快捷高效的处理能力。

4

面向业务实战的应用能力：

作为全警视频图像基础应用平台，可在各个业务领域为其他业务软件提供数据服务及工具支撑。

5

可应用于各种应用：

合成作战服务于侦查办案、合成指挥服务于指挥调度、视频侦查服务于情报、维稳处突服务于反恐、智能交通服务于交通、安保运营服务服务于民生等等。

点评

东方网力视频图像解析系统提供不同厂家、不同终端、不同视图资源的标准化和非标准化接入，并能整合其他多维感知数据资源，实现汇聚、整合、共享等应用服务。其具三大突出优势：基于深度学习的视图智能分析能力，自动提取视图中的人体、人脸和车辆的细节特征，保证了检索高效性和视图应用效率；丰富的技战法模型，对各类结构化数据进行碰撞分析，挖掘出具有实战价值的信息；实现多种技战法应用，并提供跨区域、跨网段、跨系统的省、市、县多级联网检索应用。在反恐维稳、指挥处置、治安破案、公共安全、执法监督、服务民生等各方面都有非常出色的表现。