[发明专利]移动设备可视输入系统和方法

说明书

相关申请的交叉引用

本申请要求2009年10月5日递交的系列号为12/573,705的美国专利申请的优先权，其全部内容通过引用被结合于此。

关于联邦赞助的研究或开发的声明

不适用

在紧致盘上提交的材料的通过引用的合并

不适用

受版权保护的素材的通告

在本专利文献中的部分素材受美国及其他国家的版权法的版权保护。版权所有人不反对任何人对出现在美国专利商标局专利文件或记录中的本专利文献或专利公开进行复制再现，但除此之外保留一切著作权权利。因此，版权所有人不放弃任何使该专利文献保持保密的权利，包括但不限于遵照37C.F.R.§1.14的权利。

技术领域

本发明一般涉及图像捕获和处理，并且更具体地，涉及经由移动设备的图像捕获和处理。

背景技术

由于物理信息输入控件(按钮，按键)的大小和数量，诸如PDA和智能电话之类的便携信息设备受限于信息输入的用户界面能力。输入信息还常常意欲用于第二信息处理的立即使用，并且，从除了键盘键入以外的输入方法传输的信息通常未被无缝地融合，其导致对用户操作的破坏和缺乏直觉性。

因此，本发明的目的是向移动设备提供改进的图像捕获和识别功能。在以下的公开中至少满足了这些目标中的某些。

发明内容

本发明提供了针对诸如PDA(个人数字助理)之类的便携通信设备或配备有成像能力的智能电话的改进的用户界面和信息处理能力。在本发明中，由内嵌的相机所捕获的图像被分析，以检测相关信息的存在，即，利用图像识别软件和OCR(光学特征识别)技术来捕获商用名片的图像。该相关信息包括名字、电话号码、电子邮件地址、因特网访问地址等。所检测到的相关信息被作为覆盖层显示在原始图像之上。该覆盖层可将相关信息加下划线、加框或高亮，并且，将其与屏幕上的控制(超链接)相关联，以用于后续的用户操作。与具体的相关信息相关联的控制执行具体的动作。例如，如果检测到电话号码，则用户可打电话或发送SMS(短消息服务)至电话号码。如果检测到电子邮件id，则新的电子邮件创作屏幕被在便携设备中打开。

另外，所捕获的原始图像可与其所检测到的元素(电话号码、邮件id等)和某些另外的可用信息一起编码，并且，被发明到服务器以用于进一步的处理，诸如，存档、共享和分析。网络服务器分析该图像，以用于提取设备无法提取的另外的信息。服务器将所检测到的信息作为原始图像的元数据的索引。然后，服务器可利用该元数据以用于进一步的应用，诸如，用户上载文件的关系数据库、对其他专用和公用网络内容的推荐等。

本发明的系统包括：将相关的检测到的信息作为覆盖层显示在所捕获的图像之上，该覆盖层带有用于后续用户操作的屏幕上的控制；将屏幕上的控制与具体的用户动作(发送邮件、呼叫等)相关联，将所捕获的图像与其他信息(日期、时间等)一起编码为标准格式，并且，将其发送到网络服务器以用于进一步的处理，并且，在网络服务器处接收已编码的图像，并且，将所包含的信息做索引以用于第二应用(对网络内容的推荐等)。

本发明包括用于应用带有文本和/或模式检测算法的便携信息/通信设备的可视图像输入以提高从所捕获的图像所包含的信息的可用性的系统和方法。本发明利用嵌入式相机输入并组合图像处理技术、模式识别技术和通信/信息处理步骤，以提供改进的图像数据。

一方面是一种用于在移动设备上处理图像的系统，包括：移动设备，该移动设备包括：相机，该相机用于捕获数字图像；显示器，该显示器用于显示所捕获的图像；以及图像处理模块，该图像处理模块被配置为检测包括在所捕获的图像中的一个或多个类型的信息；其中，图像处理模块被配置为将所检测到的信息作为单独层覆盖在所捕获的图像之上，以用于在显示器上查看。

在一个实施例中，所覆盖的信息被修改图形，以将其从所捕获的图像中可视地区分开。

在另一实施例中，所检测到的信息包括文本；并且其中，文本的一个或多个部分是各自可被选择的，以用于执行关于所选文本的后续动作。一个或多个控制被应用到所检测到的信息，使得一个或多个控制提供在选择文本的一个或多个部分时在移动设备上执行动作的指令。

例如，图像处理模块可被配置为识别与电话号码相关联的文本，使得一旦选择与电话号码相关联的文本，应用到电话号码的控制自动拨叫电话号码。