[发明专利]智能电视系统及其方法

说明书

技术领域

本发明涉及电视与用户交互技术，尤其涉及智能用户交互控制系统技术及其方法。

背景技术

传统的通用性电视系统经常无法满足用户的需求，当用户在传统电视系统上查找某一节目时，不仅需要知道节目的名字，还需要了解节目的大致情节，或者需要选择用户喜爱的演员或类型。如果没有合适的信息作为搜索条件输入，在线数据库也无法给出结果，或者是给出的搜索结果仍然不能够完全满足用户的需求，从而给用户体验带来不良影响。

随着技术的发展，智能电视成为一种发展趋势，人们越来越需要开发一个基于对象检测的功能强大且直观的用户交互控制系统。当用户通过遥控器向电视发送一对象请求时，智能电视可从一个或多个在线数据库中查找到相匹配的对象并向用户发送所请求的内容(例如视频、网页、维基百科、购物信息等等)。进一步地，智能电视可基于对象检测通过查找电视频道和互联网准确搜索到用户所要寻找的内容，并通过跟踪用户的浏览历史记录更新推送通知的内容。它为用户提供了一个浏览视频节目中对象的交互式视频体验。

视频一般可分为受约束视频和不受约束视频，前者的特征在于存在一定的约束因素，例如监视或交通视频，其镜头被认为是静止的，相较于前景物体，其背景是相对静止的。另一方面，不受约束视频则没有受限特征，其通常特征是快速的镜头移动，复杂和动态背景，物体遮挡。目前几乎没有可用于对无约束的视频的对象检测的实用解决方案。

所公开的方法和系统旨在解决上述的一个或多个问题以及其他问题。

发明内容

本发明的一个方面包括用于基于对象检测的智能用户交互系统的方法。该方法包括接收对应一视频节目的输入视频序列，并将所述输入视频序列分割成多个视频截图，每个视频截图包含一个或多个视频帧，方法还包括检测在上述多个视频截图中潜在的对象事件，并使用多模态线索分析一视频截图中对象的可能路径。进一步地，该方法包括集合跨越多个视频截图的基于路径选择的对象事件来检测对象(跨越多个视频截图指同一对象事件来自所述多个视频截图)，生成针对跨多个视频截图的对象事件的完整列表。

本发明的另一个方面包括一个智能用户交互系统。该系统包括用于解码输入比特流的视频解码器，用于存储作为输入视频序列的一定时间的输入比特流的数据存储器，该输入视频序列对应显示设备上显示给用户的电视节目，以及包括一用于将输入视频序列分成多个视频截图的预处理单元，其中，每个视频截图包含一个或多个视频帧。该系统还包括一用于检测在每个视频截图中可能的对象事件的检测单元，一使用多模态线索分析视频截图中对象可能路径的路径分析单元，一通过集合跨越多个视频截图的基于路径选择的对象事件来检测对象的集合单元。

本领域技术人员可根据本公开内容的描述，权利要求书和附图来理解本发明公开的其它方面内容。

附图说明

图1所示为本发明具体实施例中的典型环境示例；

图2所示为与公开的实施例相匹配的示例性计算系统；

图3所示为与所公开的实施例一致的示例性智能电视系统；

图4所示为与所公开的实施例一致的方法流程图；

图5A-5B所示为与所公开实施方案相一致的时装秀中“手提包”和“面孔”之间的拓扑关系的示例；

图6A-6B所示为与所公开的实施例一致的对象路径检测；

图7所示为与所公开实施例一致的智能电视系统的示例性操作过程。

具体实施方式

通过本发明的实施例对本发明进行详细说明，这也将在附图中进行阐述。在任何可能的情况下，相同的附图标记在整个附图中用来指代相同或相似的部件。

图1列举了与本发明实施例相结合的一典型环境100，如图1所示，环境100包括电视机(TV)102，遥控器104和用户108。可选的，环境100还可包括网络设备106。

电视机102可包括任意适当类型的电视机，例如等离子电视，液晶电视，投影电视，非智能电视，或者智能电视。电视机102也可包括其他计算系统，例如个人计算机(PC)，平板或便携式电脑，或者服务器等。

遥控器104可包括任意适当类型的遥控器，其可通过与电视机102的通信实现对电视机102的控制，例如定制的电视机遥控器、万能遥控器、平板电脑、智能手机，或者能够执行远程控制功能的任何其他计算设备。遥控器104也可包括其他类型的设备，例如基于遥控控制的运动传感器或深度相机增强的遥控器，以及简单的输入/输出设备，如键盘、鼠标、声控输入设备等。