京公网安备 11010802034615号
经营许可证编号:京B2-20210330
视频检索技术:安防大数据时代下的新贵_数据分析师
视频检索就是要从大量的视频数据中,找出所需要的视频片段,伴随着计算机技术和网络技术的发展,视频检索技术已经广泛应用在视频点播、数字电视、数字图书馆远程教育和远程医疗等领域。
在安防领域,各地平安城市、智慧城市的建设和公共安全领域的信息化建设的推进,都产生了大量监控视频数据,同时高清化和智能化的安防行业发展的趋势,视频数据的数量正在指数级增长。然而,视频数据却又不同于安防领域的其他传统的信息数据。以往的传统信息,经过多年的数据库技术的发展,已经形成了一套完善的基于信息管理系统的管理平台,可以快速准确地对所关心的数据进行检索查询,例如人口信息管理系统,报警平台,车辆管理系统等。而视频数据目前还没有这样有效的管理系统,还不能对确实存在的数据进行方便快速的查询和使用,视频检索技术的发展就是希望能解决这样的问题。
在安防领域视频检索技术主要应用在图像侦查方面,视频数据对案件侦破的作用,也促使图侦成为一个规模很大的新的警种。视频检索的具体应用主要包括视频浓缩和特征检索,而特征检索通常需要智能分析和图像增强技术的支持。
监控视频数据所蕴含的信息密度很低,针对某一具体需求,24小时的视频数据中有用的数据也许只有几秒钟,然而这几秒的数据的信息价值却很高。视频浓缩技术就是用来有效提高视频数据的信息密度的,它会将视频的运动目标从背景中分离出来,然后按照时间先后和位置关系集中叠加在背景中形成新的视频,这样既能最大程度地保留环境信息,同时在时间和空间上压缩无用信息。特征检索技术是指对视频内容中目标的特征进行标记索引,然后通过对特征的描述或样图显示的特征对视频进行搜索,找出符合特征的视频片段,快速从中获取更多信息,提升效率,节省人力成本。
应用与现状——初见成效,亟待完善
我国很多的安防企业或相关机构都陆续推出了自己的视频检索系统,具体工作过程和原理都类似,第一步是对需要检索的视频数据进行采集和集中存储,以供视频检索系统快速调用,有些厂家研发了专门的设备对硬盘里的视频数据进行快速拷贝来提高采集速度;第二步则是正式进行视频检索,其一是对数据进行浓缩摘要,浓缩后的视频数据提供给侦办人员进行人工排查,也可以用于特征检索;其二是通过用户提供的特征对视频数据进行检索。
办案人员可以通过查看浓缩视频,极大地节省排查视频的时间,当在浓缩视频中发现可疑目标时,可以通过点击视频上的目标快速打开对应的原始视频片断,进行详细查看。办案人员可以进一步通过提供目标特征,例如人或车,目标颜色、高度、运动方向、运动速度,行人着装、步态,或者通过提供一幅样片来发起搜索。
视频检索系统,首先通过高效的解码器将未解码的视频数据解码,然后通过背景建模算法分离提取出运动的目标,而后通过智能分析算法对这些运动目标的被关注特征进行提取和分析,将分析结果恰当描述,存放到数据库,与被请求搜索的特征进行比对,最后,高相关度的目标会以快照或其他方式作为结果显示出来,并可以快速定位到原始视频片段。
还有些厂商将一些运动目标的基本特征,例如目标类别、颜色、速度等信息在视频录制时就实时进行了分析,并通过这些特征对视频内容进行索引,存放在自己的设备中。这样,在需要进行特征检索的时候,只需要将用户提供的特征与视频内容的索引信息进行比对就可以定位到相关视频片段,而不需要对视频再次进行处理分析,可以有效节省分析时间。但目前不同厂商的视频内容索引和描述的标准都不尽相同,这样就会产生不同厂商之间的系统的对接和视频内容索引的共享问题,无法充分发挥系统的作用。MPEG-7标准化了对音视频特征的描述,对该问题给出了解决的指导方向,还需要针对安防视频数据的特点进一步规范和标准化。
目前我国正在应用的视频检索系统,还只能对目标的一些基本的特征进行索引和检索,当下的视频检索系统并不能完成“找到一个拿着iPhone6的女孩”这样的任务,因为受到分辨率、清晰度和视频角度等多重因素的影响,我们无法分辨出手机的型号,甚至我们不知道目标手上到底有没有东西;我们甚至无法判断这个目标是个男孩还是女孩,因为这个流行因素快速变化的时代。一些影视作品里所表现出的令人感叹的智能分析效果,只能是为研究者提供一些研究思路和方向。
除了能对前文提到的一些目标基本特征外进行检索外,目前我们能做到的是对车量牌照信息的检索,这得益于车牌识别相关技术的成熟和智能交通系统的建设。对于像人脸识别这样的任务,对于一般的监控视频,即便是高清卡口,也很难做到较高的准确率,还是要结合人工比对才能真正发挥作用,人眼可以准确分辨和识别的目标,视频检索系统却不一定能做到,达到人眼的分辨能力,那毕竟是目前机器视觉领域的最高境界和终极目标,还有相当长的路要走。看到有些产品的隐性宣传中表示,视频中的嫌疑人换了衣服,戴了帽子,更换交通工具,检索系统还能准确检索到目标,恕笔者孤陋寡闻,实在是深表怀疑。
我们介绍一个真实的案例,这也是目前视频检索技术在我国安防领域最常规的应用模式。2013年4月,某地发生重大蒙面抢劫案件,经过专案组人员分析,认为是一起精心准备和预谋的案件,嫌疑人可能会事先多次勘察过犯罪现场。为了尽快破案,当地公安局图侦大队调取了案发现场周边一周的各类监控录像,包括交通监控录像、治安监控录像和附近店铺的自有监控录像,总时长超过2000小时,希望能从中找出可疑目标,提供破案线索。
按传统的方式,几名警官同时查看视频,也需要几天的时间,通过视频浓缩技术,一名警官数小时内就能排查完视频中的可疑人员或车辆,同时,同一名刑侦人员完成排查也可以对画面中可疑人员的重复出现率更加敏感,即节省了排查时间,又降低了遗漏的概率。当过滤出可疑车辆时,通过车牌识别信息,在系统中形成车辆的行驶轨迹,给布控方案提供参考,通过车辆的行动规律,定位到了车辆长时间停留的区域,可能是嫌疑人的暂住地,再调用该区域周边的视频进行摘要排查,结合案发现场的可疑目标比对,最终锁定了嫌疑人员。
大数据时代——视频检索技术的机遇与挑战
安防基础设施的建设规模在不断地扩大,实时数据的规模已经达到PB的量级,同时来自消费领域的视频数据也在为安防提供着数据支持,每个人手中的手机都可能向公安平台上传图像信息,提供案件线索,要从这些海量的信息里快速高效地筛选有效信息,视频检索技术需要向两个方向来进行提升:首先需要提升对视频数据的处理能力和效率,要满足在海量数据级别上更准确和快速地处理数据,提取和描述信息的内容,并进行高效的索引和存储,以满足后续的数据信息检索、分析和挖掘业务。其次,需要从架构的层面上有针对性地改进目前的数据处理技术和存储架构,引入针对大数据业务的新技术,以满足大数据环境下的安防数据信息的检索需求。
目前安防领域的视频数据的分布方式还主要是分散独立地存储在各级机构的服务器上,视频检索的应用也主要是由某个独立的服务器在执行,随着数据量的急速地膨胀,这种方式必将在不久的将来遇到数据移动和计算能力的瓶颈。大数据相关的云计算、云存储技术应用到安防的视频检索业务,即能解决数据搬移的问题,又充分发挥了分布式计算的优势,发掘出充分的计算能力。
在安防领域大数据和视频检索技术实际是在相互促进发展,视频检索技术的为大数据的有效应用提供了技术支撑,大数据也倒逼着视频检索技术的效率、准确度和覆盖面的提高,这两种技术将在相互的磨合中逐步完成提升和统一。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
金融行业的运营风险贯穿业务全流程,涵盖交易欺诈、操作违规、流程漏洞、合规偏差、客户信用异常等多元场景,是银行、保险、证券 ...
2026-07-17财产保险作为金融行业的核心板块,涵盖车险、家财险、责任险、企财险等多元品类,是个人与企业抵御财产风险、经营风险的重要保障 ...
2026-07-17 很多数据分析师能熟练写SQL、做透视表,但当被问到“数据是从哪里来的?经过哪些加工才进入数据仓库?ETL具体做了什么?”时 ...
2026-07-17【核心关键词】模块、餐饮、客户、门店、企业、订单、供应链、多样化、产品、生产计划、数据分析、生产管理、物料管理、业务分 ...
2026-07-16在数字化分析时代,原始数据本身不具备业务价值,只有通过科学的统计学方法加工、拆解、验证与解读,才能挖掘数据背后的规律、差 ...
2026-07-16 很多数据分析师能熟练地写SQL、做透视表、算描述性统计,但当被问到“如何预测用户流失概率”“如何归因销量下滑的关键因素 ...
2026-07-16在描述性统计分析、数据预处理、异常值排查与多组数据分布对比工作中,箱线图(Box Plot)是应用最广泛的可视化与统计工具之一。 ...
2026-07-15在企业数据存储、业务统计与数据分析工作中,绝大多数业务数据都带有时间维度属性,例如订单创建时间、用户注册时间、支付完成时 ...
2026-07-15 很多数据分析师拿到数据就开始清洗、建模,但当被问到“这批数据属于什么类型——结构化还是非结构化?分类变量还是数值变量 ...
2026-07-15【核心关键词】产品、经营、客户、调研、销售额、宏观、会计行业、客户满意度、发展趋势、经营状况、数据分析、竞争对手、数据 ...
2026-07-14问卷调查是市场调研、用户研究、社会调研与产品分析的核心数据采集方式。问卷数据大多以分类数据为主,例如用户性别、年龄分层、 ...
2026-07-14 很多数据分析师画过趋势图、做过业绩预测,但当被问到“这个月销售额增长20%,到底是长期趋势自然增长,还是促销活动的短期 ...
2026-07-14在数据分析、业务效果验证、AB实验扩展、行业对比等场景中,我们经常需要对比三组及以上样本的均值差异,例如不同区域的客单价对 ...
2026-07-13在互联网产品运营、用户生命周期管理与商业化数据分析中,留存指标是判断产品价值、用户满意度与商业模式健康度的核心基准。常规 ...
2026-07-13 很多数据分析师做过按月份的销售额趋势图,画过按天的流量折线图,但当被问到“时间序列和普通数据有什么本质区别”“季节性 ...
2026-07-13【核心关键词】统计学、互联网、知识、课程、学生、数学、软件、招聘、数据分析、实习经历、机器学习、理论基础、业务思维、统 ...
2026-07-10在互联网运营、产品设计、市场营销与商业数据分析领域,所有转化、成交、复购行为的底层逻辑,都依托于用户决策流程。用户从产生 ...
2026-07-10 很多数据分析师能熟练地计算指标、搭建标签体系,但当被问到“画像到底在解决什么问题”“画像和标签是什么关系”“画像如何 ...
2026-07-10数据透视表是数据分析中最常用、最高效的汇总分析工具,具备快速分组、聚合计算、维度拆解、数据可视化等优势,能够轻松完成求和 ...
2026-07-09在统计学、CDA数据分析、机器学习与商业数据研究中,正态分布是最基础、最重要的数据分布形态。绝大多数参数检验、数据建模、指 ...
2026-07-09