《监控视频结构分段与视频摘要技术研究天津大学》由会员分享，可在线阅读，更多相关《监控视频结构分段与视频摘要技术研究天津大学（48页珍藏版）》请在金锄头文库上搜索。
1、A B S T R A C TN o w a d a y s ，t h ee q u i p m e n to fc i v i l ，c o m m e r c i a la n dm i l i t a r ys u r v e i l l a n c ei sg r o w i n gu pr a p i d l yd u et ot h ei n c r e a s i n gd e m a n do fs e c u r i t y M i l l i o n so fs u r v e i l l a n c ec a m e r a sr e c o r dv i d e oa
2、r o u n dt h ec l o c k , p r o d u c i n gh u g ev i d e oa r c h i v e s ，f i n d i n gc r i t i c a le v e n t si sl i k ef i n d i n gan e e d l ei nah a y s t a c k , m a k i n gt h ea r c h i v ea l m o s tw o r t h l e s s I no r d e rt ob r o w s et h ev i d e od a t aq u i c k l ya n dm a k
3、 ef u l lU S eo ft h es u r v e i l l a n c ev i d e od a t a , i ti sv e r yi m p o r t a n tt od or e s e a r c ho ns u r v e i l l a n c ev i d e os e g m e n t a t i o na n ds u m m a r i z a t i o n T h i sP a p e rf i r s ti n t r o d u c e st h ec u r r e n tr e s e a r c h e so fv i d e os u
4、 m m a r i z a t i o n ，a n dt h e ns u m m a r i e st h et r a d i t i o n a lv i d e os u m m a r i z a t i o nt e c h n o l o g i e s A c c o r d i n gt ot h es u m m a r yo ft r a d i t i o n a lv i d e os h o tc h a n g ed e t e c t i o na l g o r i t h m s ，w ep r o p o s ean e ws u r v e i l
5、l a n c ev i d e os e q u e n c es e g m e n t a t i o nm e t h o db a s e do nm o v i n go b j e c td e t e c t i o n T h i sm e t h o dd e t e c t sm o v i n go b j e c t sb ya d a p t i v eb a c k g r o u n ds u b t r a c t i o nt e c h n i q u ew i t hat h r e e - f r a m ed i f f e r e n c i n
6、gf i r s t , a n dt h es u mo ff o r e g r o u n dp i x e l si sc a l c u l a t e da sd i f f e r e n c ef e a t u r e L a s t ，as l i d i n gw i n d o wb a s e da d a p t i v et h r e s h o l di sp r o p o s e dt od e t e r m i n et h es e g m e n tb o u n d a r i e s n ee x p e r i m e n t a lr e
7、s u l t ss h o wt h ea l g o r i t h mh a st h ea d v a n t a n g e so fl o wc o m p l e x i t ya n dh i g hp e r f o r m a n c e n ep a p e ra l s op u tf o r w a r das u r v e i l l a n c ev i d e os u m m a r i z a t i o nm e t h o db yk e y f r a m eb a s e do nt r a j e c t o r ye x t r a c t i
8、 o n a c c o r d i n gt h ef e a t u r e so fs u r v e i l l a n c ev i d e o T r a j e c t o r yi se x t r a c t e df r o me a c hm o v i n go b j e c t , t o g e t h e rw i t ht h el a s tf r a m eo fc o r r e s p o n d i n gv i d e os e g m e n tt or e p r e s e n tt h em o v i n gh i s t o r yo
9、f e a c ho b j e c ti n t u i t i v e l y n ep r o p o s e dv i d e os u m m a r i z a t i o na l g o r i t h mc a ns a v eb r o w s i n gt i m ea n ds t o r a g es p a c eo b v i o u s l y , a n dh a sl a r g ea m o u n to fi n f o r m a t i o n I no r d e rt ot e s tt h ee f f e c t i v e n e s so
10、 fp r o p o s e da l g o r i t h m s ，W ed e v e l o pav i d e os u m m a r i z a t i o ns y s t e mb yM i c r o s o f tV i s u a lC + + 6 0a n dO p e n C V I tc o n t a i n ss e v e r a lf u n c t i o nm o d u l e ss u c ha sv i d e op l a y i n g ，v i d e os e g m e n t a t i o n ，t r a j e c t o
11、r ye x t r a c t i o na n ds u m m a r i z a t i o nd i s p l a y i n g 1 1 h es y s t e mc a ns a t i s f yt h eu s e r s b a s i cr e q u i r e m e n t sa n dh a sp r a c t i c a lv a l u ef o rf u t u r er e s e a r c h K E YW O R D S ：m o v i n go b j e c td e t e c t i o n ，v i d e os e g m e n
12、 t a t i o n ，t r a j e c t o r ye x t r a c t i o n ，v i d e os u m m a r i z a t i o n ，s u r v e i l l a n c ev i d e o天津大学硕t1 学位论文1 1 研究背景与意义第一章绪论图像和视频是对客观事物生动形象的描述，是直观具体的信息表达形式，是人类最重要的信息载体。在数字图像处理中，把单幅的图像( 如照片) 称为静态图像( 简称图像) ，把连续图像序列( 如电视图像) 称为运动图像或视频。如今的信息社会，随着通信、网络和微电子技术的快速发展以及人民物质生活水平的不断提高，视
13、频监控以其方便、直观和内容丰富等特点，日益受到人们的青睐，监控产品也从模拟化走向数字化与网络化。由于全球发生的一系列群体性安全事件，如英国电车恐怖袭击、俄罗斯地铁恐怖袭击等，使得视频监控系统受到了越来越多的重视，它在安全局势控制、举证以及预防犯罪等方面发挥了不可替代的作用。传统的视频监控系统将多台摄像机的视频信息传回到监控中心存储起来，同时在视频显示屏上实时显示给监控人员，监控人员需要持续不间断地注视显示屏观测是否有异常情况。随着社会对安防的要求越来越高，传统的视频监控系统暴露出一些固有的不足：一是在很多情况下，人类并非是一个可以完全信赖的观察者，无论是观看实时的视频序列还是观看录像回放，由于
14、其自身生理上的弱点，经常无法察觉安全威胁，从而导致漏报现象的发生：二是传统的视频监控系统记录了大量的原始粗糙信息，当发现异常情况时，再进行历史视频回放检查找出事件原因，但这种方式是在损失己经造成的情况下进行，后果或损失已无法挽回。智能视频监控系统就是在这种需求的驱动下得到了很大的发展和进步。为了满足人们对安防质量越来越高的要求，智能视频监控系统不需要人为干预，通过对视频图像序列进行自动分析，实现对监控范围内目标的定位、识别和跟踪，并在此基础上分析和判断目标的行为，当异常行为发生时自动向监控系统发出提示信号，采取某种应对措施或通知监控人员进行人工干预。如果将摄像机比作人的眼睛，那么“智能视频分析
15、“ 就可以比作人的大脑，它使得视频监控系统具有更为“聪明”的学习思考方式。这一根本性的改变，可极大地发挥与拓展视频监控系统的作用与能力，使监控系统具有更高的智能化，在大幅度降低资源与人员配置的同时全面提升安全防范工作的效率，成为有效地协助安全人员预防和处理危机事件、有效遏制各类犯罪的有力武器。第一章绪论不过，智能视频监控方法因监控场景需求的不同而有相应的变化。尽管在视频监控问题中，目标物的检测、跟踪、识别和行为分析等问题的研究是开放的，具有很多共性的解决方法，但是具体到实际的应用领域，各种条件的设置又具有很强的特殊性。因此从应用领域的特殊性出发，根据实际的情况选择相应的算法，有针对性地设计实现
16、视频监控系统更为有效。一个不容忽视的事实是，几乎所有的行业都涉及了视频监控等相关的安防应用：既包括公安、金融等安防需求较为旺盛的传统行业，还有电力、交通、广电、医院以及园区等对于监控需求快速增长的新兴行业。监控系统如此广泛的应用，随之而来的是海量的监控视频数据，加之监控视频多以原始的，未经编辑的形式存放，而且具有信息量大、难描述的特点，从而带来了两方面的问题：一是给存储空间带来了巨大压力；二是使这些视频数据不能充分利用，有时甚至变得毫无意义。我们感兴趣的事件，例如可疑的目标或犯罪行为并不是经常发生，工作人员在如此多的视频数据中查到此类事件无异于大海捞针。监控视频档案如此多以至于无法查看，智能视频监控技术I l 捌至今还不能给出令人满意的解决方案。因此，如何对这些海量信息进行组织、建库以达到快速、有效的检索成为当今人们需要迫切解决的问题。视频摘要是以自动或半自动的方式，通过对视频的结构和内容的分析，从原视频中提取出有意义的部分，将它们以某种方式合并成紧凑、能充分表现视频语义内容的视频概要。视频摘要技术解决的问题是如何使视频数据有效的表示和快速的访问，
