[发明专利]管理手写图连接符的系统和方法

说明书

提供了用于管理图要素的连接的系统和方法。该系统和方法可以被配置成：使得在显示设备上以交互式墨水显示多个输入图要素；将至少一个图要素识别为连接多个图要素的连接符；确定每个连接的图要素的几何构造；将该至少一个识别的连接符与连接的图要素的连接点映射到几何构造上以定义映射点；基于接收到的与交互式墨水的一个或多个交互，调整映射点在几何构造上的位置；以及使得根据至少将连接的图要素上的调整后的映射点映射为调整后的连接点，重新显示图要素。

相关申请的交叉引用

本申请要求于2017年3月22日提交的美国专利申请No.15/465,946的优先权，该美国申请要求于2016年12月15日提交的欧洲专利申请No.16 290 237.3的优先权，其全部内容通过引用合并于此。

技术领域

本公开总体涉及能够识别各种形状和字符的用户输入手写的计算设备接口领域。具体地，本公开提供用于处理实现输入手写图要素之间的连接符的显示的编辑操作的系统和方法。

背景技术

计算设备在日常生活中不断变得越来越普遍。它们的形式有台式计算机、笔记本计算机、平板计算机、电子书阅读器、移动电话、智能电话、可穿戴计算机、全球定位系统(GPS)单元、企业数字助理(EDA)、个人数字助理(PDA)、游戏机等。此外，计算设备正被纳入车辆和设备中，诸如汽车、卡车、农业设备、制造设备、建筑环境控制(例如照明、HVAC)以及家用和商用电器。

计算设备通常包括至少一个处理元件，诸如中央处理单元(CPU)、某种形式的存储器以及输入输出设备。各种计算设备及其后续使用需要各种接口和输入设备。一种这样的输入设备是触敏表面，诸如触摸屏或触摸板，其中通过用户手指或诸如笔或触写笔之类的仪器与该触敏表面之间的接触来接收用户输入。另一种输入设备是可以感知用户在输入表面上做出的手势的输入表面。再一种输入设备是位置检测系统，其检测触摸或非触摸交互与非触摸表面的相对位置。这些输入方法中的任意一种方法都可以普遍用于绘画和文本的手写或手绘输入，其中使用手写识别系统或方法来解译该绘画和文本。

手写识别在计算设备中的一个应用是创建在计算设备上手绘的、将被转换成排版版本的图。图(diagram)是解释或示出(各部件的)布置和关系的绘画。图通常包括具有任意或特定含义的形状以及与这些形状相关的文本。存在多种类型的图，诸如流程图、组织结构图、概念图、蜘蛛图、块/架构图、思维导图、框图、维恩图和金字塔。图1至图6示出了一些可能的图的排版和手写示例图绘。

图1A和图1B分别示出了排版和手写的示例概念图10，其具有各种不同的形状，定义了图框或容器12以及连接或指定图框12之间的关系的不同类型的连接符14(例如，直线箭头、曲线箭头)。此外，在图1B中，容器12包含文本16。通常在概念图中，框之间的连接在定义由这些框中的文本定义的概念相关或从属的要素或主题。概念图中可以没有框本身，替代地，可以由连接符来连接文本(例如，在文本框中定义，没有关联的形状或容器)。

图2A和图2B分别示出了排版和手写的示例思维导图20，其具有各种不同的形状，定义了图框或容器12、连接或指定图框12之间的关系的不同类型的连接符14(例如直线或曲线)，以及到思维导图的某些特征或状态的路径18。此外，在图2B中，容器12和路径18具有关联的文本16。通常在思维导图中，框之间的连接定义从由这些框中的文本定义的中心要素或主题出发的可能的备选状态，而路径定义由这些路径上的文本定义的每个备选状态的关键特征。在思维导图中可以没有框本身，替代地，可以由连接符和路径来连接文本(例如，在文本框中定义，没有关联的形状或容器)。