[发明专利]自动提取体育节目精彩片断的方法和设备

说明书

技术领域

本发明涉及音频信号分析，更具体地讲，涉及仅从音频信号自动提取体育节目精彩片断。

背景技术

近来，随着音频信号分析技术的发展，可将与体育节目相关的多媒体内容自动分析并总结为精彩片断。传统上，编辑精彩片断是人们的工作。但是，随着多媒体互联网和广播的发展，用户可通过数字TV、互联网广播、移动网络等访问大量多媒体内容。因此，如果内容被自动分析并总结为精彩片断，则可作为帮助用户发现他们想要欣赏的内容的索引。

在多媒体内容分析领域中，存在大量关于体育节目精彩片断的提取和总结的文献，例如，B.Li，M.I.Sezan，＂Semantic Sports Video Analysis：Approachesand New Applications＂，in Proc.of IEEE International Conference on ImageProcessing，vo.1，pp17-20，2003；M.Yeung，B.Yeo，B.Liu，＂Extracting Story Unitsfrom Long Programs for Video Browsing and Navigation＂，in Proc.InternationalConference on Multimedia Computing and Systems，1996；Y.Takahashi，N.Nitta，N.Babaguchi，＂Video Summarization for Large Sports Video Archives＂，in proc.ofIEEE International Conference on Multimedia and Expo，pp1170～1173，2005；J.Wang，C.Xu，E.Chng，K，Wan，Q.Tian，＂Automatic Replay Generation for SoccerVideo Broadcasting＂，in proc.of ACM Multimedia.2004；L.Xie，S.F.Chang，A.Divakaran，H.Sun，＂Structure Analysis of Soccer Video with Hidden MarkovModels＂，in Proc.of the 2002 IEEE International Conference on Acoustics，Speech，and Signal Processing，2002；A.Hanjalic，＂Adaptive Extraction ofHighlights from A Sport Video Based on Exciting Modeling＂，in IEEE trans.onMultimedia，vo.7，no6，pp1114～1122，2005；H.C.Shih，C.L.Huang，＂MSN：Statistical Understanding of Broadcasted Sports Video Using Multi-level SemanticNetwork＂，in IEEE trans.on Broadcasting，pp.449～459，2005。上述文献目的在于通过使用计算机视觉和信号处理技术检测事件，提取情节单元，产生精彩片断，或自动将精彩片断分等，以在内容层面(semantic level)上理解视频。典型的统计学习方法被采用。基于模板(P.Wang，Z.Liu，S.Yang，＂A ProbabilisticTemplate-based Approach to Discovering Repetitive Patterns in Broadcast Videos＂，in proc.of ACM Multimedia，2005)、统计聚类(C.X.Liu，Q.M.Huang，S.Q.Jiang，W.G.Zhang，＂Extracting Story Units in Sports Video Based on Unsupervised VideoScene Clustering＂，proc.of IEEE International Conference on Multimedia andExpo，2006)、隐马尔可夫模型(L.Xie，S.F.Chang，A.Divakaran，H.Sun，＂Structure Analysis of Soccer Video with Hidden Markov Models＂，in Proc.of the2002 IEEE International Conference on Acoustics，Speech，and Signal Processing，2002；E.Kijak，G.Gravier，P.Gros，L.Oisel，F.Bimbot，＂HMM Based Structure ofTennis Videos Using Visual and Audio Cues＂，in Proc.int.conf.on Multimediaand Expo，2003；G.Xu，Y.F.Ma，H.J.Zhang，S.Q.Yang，＂A HMM Based SemanticAnalysis Framework for Sports Game Event Detection＂，in Proc.of IEEEInternational Conference on Image Processing，pp.25-28，2003)、支持向量机(J.Wang，C.Xu，E.Chng，K，Wan，Q.Tian，＂Automatic Replay Generation forSoccer Video Broadcasting＂，in proc.of ACM Multimedia.2004)和各种贝叶斯网络(C.Y.Chao，C.L.Huang，H.C.Shih，＂Semantic-based Highlight Extraction ofSoccer Program Using DBN＂，Proc.of the 2005 IEEE International Conference onAcoustics，Speech，and Signal Processing，2005；J.G.Li，T.Wang，W.Hu，M.L.Sun，Y.M.Zhang，＂Soccer Highlight Detection Using Two-Dependent BayesianNetwork＂，Proc.int.conf.on Multimedia and Expo，2006)已经被研究和发表。