[发明专利]可视信息交互的方法及控制系统

摘要

本发明涉及一种可视信息交互的方法及控制系统，包括用于对屏幕画面进行截屏；同时获取客户对屏幕操作相关请求信息的客户端；将获取的客户请求信息传送给辅助交互服务器；将接收到的数据包的信息进行解析；调用鼠标对无法通过键盘访问的目标控件依次进行点击；用于接收客户端传送的客户数据请求信息的辅助交互服务器，将接收的客户端传送的客户数据请求信息传送给辅助人员服务端，将接收到的数据包传输给客户端；辅助人员服务端，记录辅助人员的每次点击点的坐标、点击点的图层和点击点的颜色信息特征，将数据包传输给辅助交互服务器。可视信息交互的方法及控制系统，通过远程客服的方式，为视障人士提供远程快速精确点击对应电脑软件控件的方法。

主权项

一种可视信息交互的方法，其特征在于，包括：屏幕上一区域等待输入；将所述区域的图像数据传送到辅助交互服务器；所述辅助交互服务器根据响应规则将所述图像数据呈现给辅助人员；所述辅助人员对所述图像数据还原呈现进行操作，记录坐标数据；将所述坐标数据传送到辅助交互服务器；所述辅助交互服务器将所述坐标数据传送回所述区域；所述坐标数据响应所述区域的所述输入。