[发明专利]充实视频的屏幕文字触发字

说明书

发明背景

1.发明领域

本发明涉及媒体技术领域。具体而言涉及视频和相关的屏幕文字。

2.相关申请的交叉引用

本发明利用屏幕文字将视频信号跟辅助信息关联起来，并且提取和增加文字信息，就象本受让人于1999年7月9日提交的09/351086号共同未决申请所涉及的一样，在这里将它引入作为参考。3.相关技术

近些年来，媒体源的数量越来越大，来自每个源的信息的量也在不断增大，使得信息超出了负荷能力。大多数消费者既没有时间也不愿意将时间花在大量信息上来寻找跟他们的需求相关的信息。因此人们发展了所谓的“推销技术”。Pointcast或者Backweb这样的网络应用程序，或者是更新的网络浏览器，会询问用户对哪些种类的信息和网站感兴趣。然后网络服务器将用户感兴趣的信息“推销”给用户，而不是等待用户请求获得它们。这样做是周期性的，不会引起人注意。

与此同时，随着媒体技术的进步，视频、音频和其它媒体之间的界线已经模糊。媒体技术的进步使得将因特网信息和其它信息材料跟传统的电视节目一起发送给消费者的视频显示器成为可能。因为因特网已经成为电子商务的工具，消费者要查看相同或者相关主题的视频、音频和文字信息这些媒体的组合。消费者已经熟悉了超级链接概念，以及“钻进去”提取它们正在环球网(WWW)上查看的主题的额外信息这样的概念。

目前，这些额外信息的提取可以利用闭路字幕文字、音频和自动情节分段以及识别来实现。Mitre公司提供的广播新闻编辑器(BNE)通过自动地将新闻广播划分成一个一个的情节段，并且在跟这些段有关的闭路字幕文字的第一行提供每个情节段的概要，使得这种提取成为可能。除此以外，还为每个情节段找出闭路字幕文字或者音频信息的关键字。

同样是Mitre公司的广播新闻浏览器(BNN)按照跟消费者选出来的搜索字相匹配的每个情节段的关键字的出现次数对节目段进行排序。因此，消费者很可能感兴趣的情节段已经被找出来。但是，将BNN和BNE结合起来使用要求消费者脑子里有一个明确的搜索主题，而在典型的频道搜索情形中常常不是这样。

为用户提供电视节目辅助信息的专利有Brodsky的第5809471号美国专利“利用动态提取的词汇提取交互式电视或者电话信号中没有的额外信息”和Legall等等的第6005565号美国专利“电子节目指南、互联网和其它信息资源的综合搜索”。在‘471号专利中，从电视节目或者闭路字幕文字提取关键字，产生一个动态变化的辞典。用户在从电视广播中看到的词语或者听到的词的基础之上请求获得信息。将用户的请求跟辞典进行比较，发现相同词的时候，就搜索要显示的辅助信息。

按照’565号专利，用户选择要搜索的主题或者来源。根据用户输入的信息，搜索工具搜索电子节目指南和环球网这样的其它信息资源并显示搜索结果。‘471号专利和‘565号专利都要求用户提供感兴趣的关键字。跟节目(也就是股市报告)的主题形成对比，这两个专利都没有将提取的辅助信息跟节目的全局内容(也就是新闻节目)关联起来。

发明简述

因此，提供一种方法和一种系统，利用屏幕文字自动地提供辅助多媒体信息增强消费者的电视观看体验，是非常有意义的。所谓的屏幕文字(transcripttext)至少包括以下内容之一：视频文字、语音识别软件产生的文字、节目屏幕文字、电子节目指南信息和包括所有或者部分节目信息的闭路字幕文字。视频文字是将图像作为背景，前景上显示的叠加或者重叠文字。例如，定位名常常作为视频文字出现。视频文字也可以是嵌入文字的形式，例如可以从视频图像中识别和提取街道名称。

提供不仅仅是单个消费者已知的兴趣或者简档专用，同时也是正在观看的节目内容专用的辅助信息也是非常有意义的。例如，新闻段会跟有线网新闻(CNN)网页的连接有关，而广告则会跟另外的产品信息有关。这种方法和系统将利用学习模型在电视内容和其它媒体内容之间连续地产生新的关联，同时确定应该显示多少和哪种类型的这种辅助信息。通过这种方式，辅助信息会跟电视节目无缝隙地结合起来，而不会影响观众，也不会要求观众进行任何操作。