视频图像解析系统标准方案ppt课件.pptx
,Content,目 录,”,1,2,3,4,现状分析,如何解决,产品概述,综合业务应用,现状分析,1,1、关于加强公共安全视频监控建设联网应用工作的若干意见(发改高技2015996号) 逐步建立国家级和省级公共安全视频图像数据处理分析中心，深化视频图像信息预测预警、实时监控、轨迹追踪、快速检索等应用。 ,2、 公安部关于印发的通知（公发20155号）构建基于大数据架构的部、省两级公安信息资源服务体系。推进公安业务应用系统深度整合，健全信息资源共享机制。 ,3、 公安部关于印发的通知（公通字201518号）提高视频图像服务实战能力。构建完善视频图像基础资源数据库和综合应用数据库，支撑专业研判与深度应用。发挥智能分析技术优势，推动视频图像信息解析系统建设，提供视频图像信息服务与管理。 ,4、公安部关于印发的通知（公通字20154号）建设视频图像信息实战应用综合服务平台及视频图像信息数据库。 ,贯彻中央九部委和公安部发展规划,近年来，公安部通过加强顶层设计和统筹规划，组织全国公安机关分期推进了城市报警与监控系统建设、视频监控系统联网和视频图像信息整合共享工作，公安视频监控工作基础建设不断夯实。前端监控点位覆盖与联网基本覆盖了公共区域、重点单位和要害部位。以视频监控为主要代表的视频监控系统在公安机关维护社会稳定、开展治安防控、预防打击违法犯罪、保障公共安全等工作中发挥了不可或缺的重要作用。随着 GA/T 1399公安视频图像分析系统和GA/T1400公安视频图像信息应用系统相关标准的发布，规范了视频图像信息内容的智能化提取与共享，加速公共安全视频监控规模化、智能化及深度化应用。同时，视频图像信息结合手机MAC、RFID等信息进行综合应用，充分挖掘视频图像信息的价值，为决策人员客观了解真实情况、科学制定处置决策提供了重要支撑。,现状,当前阶段,1,2,3,4,在整个安全防范应用要求不断提升的大环境下，针对公共安全管控的范围及内容不断在扩大，同时针对监控应用的智能化、实效性也提出了更高的要求。,看的见，看的远,看的清，看的准,智能化、找的见、知过去,自主化、晓未来,各类场所建设了大量监控终端，解决偏远、重要区域的立体监控问题。,针对特定场景的重点目标实时检测采集，解决人、车等信息的自动采集问题。,基于深度学习与大数据技术的自动化数据采集与分析，解决非结构化视频数据的结构化检索与视图对象的关系分析、行为分析等。,预期未来深度整合大数据技术、视频分析技术、语音识别、专家系统等技术，解决资源分析应用的工具化、危险危机预警的智能化问题。,需求分析,面向多源数据、复杂网络的接入需求,面向视频图像内容的准确提取需求,面向业务实战的应用一体化的需求,面向海量数据的多元处理需求,目前出现了各种人、车、物的感知型采集前端，包括摄像头、GPS、RFID、WIFI探针、门禁等产品。涉及了专网、VPN、互联网、互联网上的局域网，那么对于数据的连接、共享就提出了更高的要求,视频多，挖掘浅。算法的准确度限制了视频图像实战的应用效果，视频中人脸、人体、车辆各种属性、各种特征的提取亟需挖掘,海量视频图像处理方式多样化，包括CPU、GPU等各种计算资源，需要解决资源调度管理的问题，最终将这些资源有效利用。多样化的数据，对存储、分析也提出挑战,如何最大化满足各类用户的应用需求，充分发挥视频图像信息的价值,如何解决,2,视频监控,视频图像、时间、地点、日期、地址、点位编码等。,人脸图片、戴眼镜、年龄、性别、抓取时间、抓拍地点等。,车辆卡口,人脸卡口,WIFI探针,电子围栏,烟火感知,证件感知,卡口编号、车辆牌号、车牌颜色、车辆类型、车辆品牌、车辆方向、车辆速度、车身颜色、抓取时间，抓拍地点等。,手机的MAC地址，抓取时间，抓取地点、滞留时间等。,手机IMEI、手机IMSI、抓取时间、抓取地点、滞留时间等。,烟火、报警时间、报警地点等。,身份证号码、姓名、性别、民族、住址、发证机关、证件有效期、身份证图片、门禁卡号、抓取时间、抓取地点等。,2.1解决多源数据、复杂网络的接入难题-多源数据,数据汇聚：多源数据，兼容接入：平台需具备多种数据类型的采集能力，多种前端的适应能力。,RFID,终端编号，采集时间，设备类型、场所名称等。,摄像机,人脸/车辆卡口,GPS,报警主机,WIFI探针,公安视频专网,公安信息网,安 全 隔 离 平 台,政务专网,互联网,运营商专线/VPN,互联网,摄像机,人脸/车辆卡口,GPS,报警主机,WIFI探针,安 全 隔 离 平 台,安 全 隔 离 平 台,政务专网,安 全 隔 离 平 台,1. 公安视频专网、政务专网、社会单位资源的整合；2. 部门重点社会场所、小区、背街小巷监控点位补充；3. 根据使用权限实现跨网络的资源共享；4. 对于多种数据源的接入、汇聚、共享。,私有云 & 公有云,复杂网络：全域全网，统一汇聚,组件式设计,支持对接第三方平台及设备，增强平台兼容性,2.2解决视频图像内容的准确提取难题,视频结构化，采用深度学习算法对视频进行结构化处理，提取视频图像中人、车、物、行为等关键目标的属性，并进行语义描述。,支持 30 水平和倾斜角识别单帧并发识别人脸10,支持识别 3000+ 种车辆品牌（品牌、子品牌、年款）,支持 28 种人体属性识别（符合GA/T 1399、1400标准）,支持3类人群分析和5类报警事件检测（过密、聚集、滞留、逆行、混乱）,支持13种异常行为检测分析,2.3解决海量数据的多元处理难题-视频图像,云计算平台提供随任务需求的资源调度，负载均衡，优先级切换。,万象：视频云平台,算法SDK开放接口,算法服务引擎开放接口,异构设备管理接口,视图分析任务,二次识别,人脸识别,视频结构化,视频布防,质量诊断,分布式边缘计算节点,视频云计算资源池,城市级基础云架构,云计算：资源调度、负载均衡,CPU资源,GPU资源,融合调度、实现资源最优利用,主要处理并发量较低、串行计算量较大的任务并且可与全部算法适配，解决兼容性和资源不足问题。,主要承担解码计算以及处理并发数多，数据量大或一些使用到专用图像算法的任务。,解决海量数据的多元处理难题-大数据,OPAQ,全文检索,千亿数据，秒级响应,云存储：视图资源混存、安全可靠,硬件节点层,高性能节点,大容量节点,应用层,文件存储,备份、归档,数据分析,对象存储,视频流,语音流,图片文件,1. 海量混存,原始视频流直存，视频统一调度管理千亿级存储文件数，容量可扩展至百PB弹性扩容，全对称结构存储图片、视频、语音多种类型,2. 安全可靠,支持任意数量硬盘故障，支持节点故障跨节点多重数据保护,3. 高性能,全局缓存，高速访问热点视频资源分级存储，自动处理冷热数据，最优化利用存储资源7000 OPS/节点高速吞吐,统一存储资源池,原始视频存储（利旧）,结构化数据存储,原始视频存储,图片数据存储,新建计算资源池,流直存接口,数据读写接口,2.4解决业务实战的应用一体化难题,微服务：动态构建、快速部署,IaaS,PaaS云管理系统,云中间件服务,分布式消息,弹性负载均衡,分布式缓存,微服务运行与治理框架,服务发现,服务注册,服务路由,服务定义管理,服务监控（调用链）,服务治理（隔离、熔断）,外部中间件集成CSC,视频应用服务,人脸服务,车辆服务,视频大数据服务,案事件服务,其他,微服务是一种云原生应用的架构，由粒度小且专注于一个功能的单独进程组成，可独立部署，彼此之间轻量级通信，松耦合。通过微服务架构，实现视频应用云服务化。,产品概述,3,视频图像解析系统遵循GA/T 1399公安视频图像分析系统和GA/T 1400公安视频图像信息应用系统等标准，通过整合视频资源、车辆卡口资源、人脸卡口资源、RFID数据资源、WIFI探针资源等多种数据信息，依托于混合云计算、智能视频结构化分析和大数据等技术，面向各类行业用户，提供统一的视频图像解析和大数据应用与服务的生态系统。,视频图像解析系统,视频专网：构建视频实时结构化和视频大数据服务能力,数据资源池：统一汇聚视频资源、人脸与车辆卡口资源实时结构化：对视频图像进行实时结构化解析，实时分析提取价值信息视频大数据：依托大数据技术进行多元数据的综合分析、数据挖掘，构建视频大数据实战应用模型,公安信息网：构建以视频结构化数据为核心的大数据应用体系,大数据资源池：车辆数据、人像数据、案事件数据、公安业务数据统一存储与管理大数据技战法库：依托视频结构化信息建立与案事件的关联和其他公安业务数据的关联，构建以视频结构化数 据为核心的公安业务实战技战法资源库视频大数据服务：面向公安各个业务警种和业务系统，提供视频大数据数据服务和应用服务,双网联动，各具特色,三网架构 综治,数据级联共享,地市,省厅,区县,级联,省厅视频图像解析系统,地市视频图像解析系统,区县视频图像解析系统,检索、布控、订阅,级联,跨网跨域数据应用（跨域）,检索、布控、订阅,检索、布控、订阅,综合业务应用,4,一张地图，多种资源和信息的融合展现,4.1 时空一体化的视图资源分析研判,4.2 数据仓库：提供多维大数据资源服务,向下：,数据接入的开放性异构设备的兼容,向上：,符合接口要求的数据共享,内部：,符合标准及实战应用的数据资源服务,视频图像基础信息资源库（面向基础资源维度）,分组1,设备1,分组2,设备2,分组N,设备N,公共字典值,视频图像主题库（面向对象资源维度）,标准库,扩展库,人脸,人员,物品,场景,机动车,非机动车,视频图像标签,手机信息,手机信息,手机信息,常口库,重口库,暂住库,视频图像专题库（面向业务应用维度）,人员,车辆,案事件,事件,人脸,人体,车辆,人脸,场景,WIFI,报警,事件,人脸,人体,车辆,人脸,场景,WIFI,报警,事件,人脸,人体,车辆,人脸,场景,WIFI,报警,数据仓库-智能检索结果呈现,数据仓库-智能检索结果呈现,将传统视频监控的应用模式从“看视频”向“搜视频”转变,4.3丰富的人员技战法让找人更便捷,多图检索，提高结果精准度,跨场景多摄像机的人体目标轨迹追踪,涉恐人员库,涉毒人员库,盗窃人员库,常住人口库,违法人口库,在逃人口库,加强重点人员信息管控,多维数据关联的综合人像数据库,人员照片,证件信息,手机信息,车辆所有人信息,人像,4.4 连环技战法环环相扣,多数据的研判技战法,4.4 连环技战法环环相扣,4.4 连环技战法环环相扣,人体找人,人脸质量86 65 82 70,人脸找人,4.5 以车为核心的车辆大数据应用,车辆大数据应用,针对无牌可疑车辆进行分析，进行无牌车辆预警。,无牌车分析,针对主驾未系安全带进行检测，检测准确率达到90%以上,未系安全带,开车打电话违法驾驶行为检测准确率达到90%以上，2016年上海项目，开车打电话：每天输出有效数据1900条,开车打电话,其他车辆分析,4.6实时监控,继承传统监控模式的优势，看视频、查录像满足不同应用场景看视频的需求,采集信息,碰撞分析示例,目标信息轨迹,提供综合碰撞分析能力，建立以人像为核心，提供人脸、MAC地址、车辆、案事件等信息关联，多维度数据确认目标。,4.7多维数据的目的？-增加信息确定性,4.8综合布控：对重点人员和重点车辆提供多种布控手段,图像处理,浓缩摘要,视频转码,人工标注,车辆画像,视频拼接,支持全网开放和独立添加两种模式，满足不同用户对工具的需求,4.9工具集,4.10 应用模式-作为全警视频图像基础应用平台，可在各个业务领域为其他业务软件提供数据服务及工具支撑,服务于侦查办案合成作战,服务于其他,服务于指挥调度合成指挥,服务于刑侦视频侦查,服务于情报公安大数据,服务于反恐维稳处突,服务于交通智能交通,服务于民生安保运营服务,总结-解析系统五大特色,
