京公网安备 11010802034615号
经营许可证编号:京B2-20210330
视频检索技术:安防大数据时代下的新贵_数据分析师
视频检索就是要从大量的视频数据中,找出所需要的视频片段,伴随着计算机技术和网络技术的发展,视频检索技术已经广泛应用在视频点播、数字电视、数字图书馆远程教育和远程医疗等领域。
在安防领域,各地平安城市、智慧城市的建设和公共安全领域的信息化建设的推进,都产生了大量监控视频数据,同时高清化和智能化的安防行业发展的趋势,视频数据的数量正在指数级增长。然而,视频数据却又不同于安防领域的其他传统的信息数据。以往的传统信息,经过多年的数据库技术的发展,已经形成了一套完善的基于信息管理系统的管理平台,可以快速准确地对所关心的数据进行检索查询,例如人口信息管理系统,报警平台,车辆管理系统等。而视频数据目前还没有这样有效的管理系统,还不能对确实存在的数据进行方便快速的查询和使用,视频检索技术的发展就是希望能解决这样的问题。
在安防领域视频检索技术主要应用在图像侦查方面,视频数据对案件侦破的作用,也促使图侦成为一个规模很大的新的警种。视频检索的具体应用主要包括视频浓缩和特征检索,而特征检索通常需要智能分析和图像增强技术的支持。
监控视频数据所蕴含的信息密度很低,针对某一具体需求,24小时的视频数据中有用的数据也许只有几秒钟,然而这几秒的数据的信息价值却很高。视频浓缩技术就是用来有效提高视频数据的信息密度的,它会将视频的运动目标从背景中分离出来,然后按照时间先后和位置关系集中叠加在背景中形成新的视频,这样既能最大程度地保留环境信息,同时在时间和空间上压缩无用信息。特征检索技术是指对视频内容中目标的特征进行标记索引,然后通过对特征的描述或样图显示的特征对视频进行搜索,找出符合特征的视频片段,快速从中获取更多信息,提升效率,节省人力成本。
应用与现状——初见成效,亟待完善
我国很多的安防企业或相关机构都陆续推出了自己的视频检索系统,具体工作过程和原理都类似,第一步是对需要检索的视频数据进行采集和集中存储,以供视频检索系统快速调用,有些厂家研发了专门的设备对硬盘里的视频数据进行快速拷贝来提高采集速度;第二步则是正式进行视频检索,其一是对数据进行浓缩摘要,浓缩后的视频数据提供给侦办人员进行人工排查,也可以用于特征检索;其二是通过用户提供的特征对视频数据进行检索。
办案人员可以通过查看浓缩视频,极大地节省排查视频的时间,当在浓缩视频中发现可疑目标时,可以通过点击视频上的目标快速打开对应的原始视频片断,进行详细查看。办案人员可以进一步通过提供目标特征,例如人或车,目标颜色、高度、运动方向、运动速度,行人着装、步态,或者通过提供一幅样片来发起搜索。
视频检索系统,首先通过高效的解码器将未解码的视频数据解码,然后通过背景建模算法分离提取出运动的目标,而后通过智能分析算法对这些运动目标的被关注特征进行提取和分析,将分析结果恰当描述,存放到数据库,与被请求搜索的特征进行比对,最后,高相关度的目标会以快照或其他方式作为结果显示出来,并可以快速定位到原始视频片段。
还有些厂商将一些运动目标的基本特征,例如目标类别、颜色、速度等信息在视频录制时就实时进行了分析,并通过这些特征对视频内容进行索引,存放在自己的设备中。这样,在需要进行特征检索的时候,只需要将用户提供的特征与视频内容的索引信息进行比对就可以定位到相关视频片段,而不需要对视频再次进行处理分析,可以有效节省分析时间。但目前不同厂商的视频内容索引和描述的标准都不尽相同,这样就会产生不同厂商之间的系统的对接和视频内容索引的共享问题,无法充分发挥系统的作用。MPEG-7标准化了对音视频特征的描述,对该问题给出了解决的指导方向,还需要针对安防视频数据的特点进一步规范和标准化。
目前我国正在应用的视频检索系统,还只能对目标的一些基本的特征进行索引和检索,当下的视频检索系统并不能完成“找到一个拿着iPhone6的女孩”这样的任务,因为受到分辨率、清晰度和视频角度等多重因素的影响,我们无法分辨出手机的型号,甚至我们不知道目标手上到底有没有东西;我们甚至无法判断这个目标是个男孩还是女孩,因为这个流行因素快速变化的时代。一些影视作品里所表现出的令人感叹的智能分析效果,只能是为研究者提供一些研究思路和方向。
除了能对前文提到的一些目标基本特征外进行检索外,目前我们能做到的是对车量牌照信息的检索,这得益于车牌识别相关技术的成熟和智能交通系统的建设。对于像人脸识别这样的任务,对于一般的监控视频,即便是高清卡口,也很难做到较高的准确率,还是要结合人工比对才能真正发挥作用,人眼可以准确分辨和识别的目标,视频检索系统却不一定能做到,达到人眼的分辨能力,那毕竟是目前机器视觉领域的最高境界和终极目标,还有相当长的路要走。看到有些产品的隐性宣传中表示,视频中的嫌疑人换了衣服,戴了帽子,更换交通工具,检索系统还能准确检索到目标,恕笔者孤陋寡闻,实在是深表怀疑。
我们介绍一个真实的案例,这也是目前视频检索技术在我国安防领域最常规的应用模式。2013年4月,某地发生重大蒙面抢劫案件,经过专案组人员分析,认为是一起精心准备和预谋的案件,嫌疑人可能会事先多次勘察过犯罪现场。为了尽快破案,当地公安局图侦大队调取了案发现场周边一周的各类监控录像,包括交通监控录像、治安监控录像和附近店铺的自有监控录像,总时长超过2000小时,希望能从中找出可疑目标,提供破案线索。
按传统的方式,几名警官同时查看视频,也需要几天的时间,通过视频浓缩技术,一名警官数小时内就能排查完视频中的可疑人员或车辆,同时,同一名刑侦人员完成排查也可以对画面中可疑人员的重复出现率更加敏感,即节省了排查时间,又降低了遗漏的概率。当过滤出可疑车辆时,通过车牌识别信息,在系统中形成车辆的行驶轨迹,给布控方案提供参考,通过车辆的行动规律,定位到了车辆长时间停留的区域,可能是嫌疑人的暂住地,再调用该区域周边的视频进行摘要排查,结合案发现场的可疑目标比对,最终锁定了嫌疑人员。
大数据时代——视频检索技术的机遇与挑战
安防基础设施的建设规模在不断地扩大,实时数据的规模已经达到PB的量级,同时来自消费领域的视频数据也在为安防提供着数据支持,每个人手中的手机都可能向公安平台上传图像信息,提供案件线索,要从这些海量的信息里快速高效地筛选有效信息,视频检索技术需要向两个方向来进行提升:首先需要提升对视频数据的处理能力和效率,要满足在海量数据级别上更准确和快速地处理数据,提取和描述信息的内容,并进行高效的索引和存储,以满足后续的数据信息检索、分析和挖掘业务。其次,需要从架构的层面上有针对性地改进目前的数据处理技术和存储架构,引入针对大数据业务的新技术,以满足大数据环境下的安防数据信息的检索需求。
目前安防领域的视频数据的分布方式还主要是分散独立地存储在各级机构的服务器上,视频检索的应用也主要是由某个独立的服务器在执行,随着数据量的急速地膨胀,这种方式必将在不久的将来遇到数据移动和计算能力的瓶颈。大数据相关的云计算、云存储技术应用到安防的视频检索业务,即能解决数据搬移的问题,又充分发挥了分布式计算的优势,发掘出充分的计算能力。
在安防领域大数据和视频检索技术实际是在相互促进发展,视频检索技术的为大数据的有效应用提供了技术支撑,大数据也倒逼着视频检索技术的效率、准确度和覆盖面的提高,这两种技术将在相互的磨合中逐步完成提升和统一。
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在回归分析的结果解读中,R方(决定系数)是衡量模型拟合效果的核心指标——它代表因变量的变异中能被自变量解释的比例,取值通 ...
2025-12-04在城市规划、物流配送、文旅分析等场景中,经纬度热力图是解读空间数据的核心工具——它能将零散的GPS坐标(如外卖订单地址、景 ...
2025-12-04在CDA(Certified Data Analyst)数据分析师的指标体系中,“通用指标”与“场景指标”并非相互割裂的两个部分,而是支撑业务分 ...
2025-12-04每到“双十一”,电商平台的销售额会迎来爆发式增长;每逢冬季,北方的天然气消耗量会显著上升;每月的10号左右,工资发放会带动 ...
2025-12-03随着数字化转型的深入,企业面临的数据量呈指数级增长——电商的用户行为日志、物联网的传感器数据、社交平台的图文视频等,这些 ...
2025-12-03在CDA(Certified Data Analyst)数据分析师的工作体系中,“指标”是贯穿始终的核心载体——从“销售额环比增长15%”的业务结论 ...
2025-12-03在神经网络训练中,损失函数的数值变化常被视为模型训练效果的“核心仪表盘”——初学者盯着屏幕上不断下降的损失值满心欢喜,却 ...
2025-12-02在CDA(Certified Data Analyst)数据分析师的日常工作中,“用部分数据推断整体情况”是高频需求——从10万条订单样本中判断全 ...
2025-12-02在数据预处理的纲量统一环节,标准化是消除量纲影响的核心手段——它将不同量级的特征(如“用户年龄”“消费金额”)转化为同一 ...
2025-12-02在数据驱动决策成为企业核心竞争力的今天,A/B测试已从“可选优化工具”升级为“必选验证体系”。它通过控制变量法构建“平行实 ...
2025-12-01在时间序列预测任务中,LSTM(长短期记忆网络)凭借对时序依赖关系的捕捉能力成为主流模型。但很多开发者在实操中会遇到困惑:用 ...
2025-12-01引言:数据时代的“透视镜”与“掘金者” 在数字经济浪潮下,数据已成为企业决策的核心资产,而CDA数据分析师正是挖掘数据价值的 ...
2025-12-01数据分析师的日常,常始于一堆“毫无章法”的数据点:电商后台导出的零散订单记录、APP埋点收集的无序用户行为日志、传感器实时 ...
2025-11-28在MySQL数据库运维中,“query end”是查询执行生命周期的收尾阶段,理论上耗时极短——主要完成结果集封装、资源释放、事务状态 ...
2025-11-28在CDA(Certified Data Analyst)数据分析师的工具包中,透视分析方法是处理表结构数据的“瑞士军刀”——无需复杂代码,仅通过 ...
2025-11-28在统计分析中,数据的分布形态是决定“用什么方法分析、信什么结果”的底层逻辑——它如同数据的“性格”,直接影响着描述统计的 ...
2025-11-27在电商订单查询、用户信息导出等业务场景中,技术人员常面临一个选择:是一次性查询500条数据,还是分5次每次查询100条?这个问 ...
2025-11-27对数据分析从业者和学生而言,表结构数据是最基础也最核心的分析载体——CRM系统的用户表、门店的销售明细表、仓库的库存表,都 ...
2025-11-27在业务数据可视化中,热力图(Heat Map)是传递“数据密度与分布特征”的核心工具——它通过颜色深浅直观呈现数据值的高低,让“ ...
2025-11-26在企业数字化转型中,业务数据分析师是连接数据与决策的核心纽带。但“数据分析师”并非单一角色,从初级到高级,其职责边界、能 ...
2025-11-26