[发明专利]用于记录、编辑和再现计算机会话的方法

说明书

本发明涉及一种用于记录、编辑和重放用户计算机会话的方法和系统，所述方法和系统在会话期间捕获一系列事件，包括桌面的初始状态以及与(多个)应用的所有用户交互。所述事件作为一个JSON对象的集合被记录并且存储在服务器上，并且表示会话的帧是可编辑的，包括把不同的文字、音频、视频和图像插入到记录中。记录器应用包括在JavaScript中实施的核心引擎以及在本地或者远程地可用于编辑和重放的各种服务器配置。

相关申请的交叉引用

本申请是2016年7月13日提交的美国专利申请号15208643的继续部分申请，该申请通过引用的方式被全文合并在本文中。

技术领域

本发明涉及一种用于记录用户动作的方法和系统，更具体来说涉及在针对台式或膝上型计算机上的应用进行工作的同时记录、编辑和再现用户web浏览器会话，或者更宽泛而言是用户会话。

背景技术

人类生活的很大部分正越来越多地在线上进行，并且人们常常希望通过保存其与web浏览器的交互(或者更一般而言是其与台式/膝上型计算机上的应用的交互)来记住其线上生活的某些方面。当某人对他的线上经历进行记录时，很自然的是期望对这样的记录进行编辑以用于讲故事或者用于改进的未来通信。传统的记录可以通过视频屏幕捕获来实施。但是视频屏幕捕获不允许以所期望的细节水平对web浏览器会话的记录进行编辑。虽然可以使用两种类型的记录——参见图1，但是现有的手段都无法捕获与网页的每一项元素和交互，并且不允许在重放之前进行修改和编辑，保留超文本链接从而使得观看者可以通过在重放期间进行点击而跟随链接，以及修改任何元素或交互，这些对于视频屏幕记录都是不可能实现的。

希望能够替换页面上的任何元素以及删除或改变任何交互，从而允许对所记录的web浏览器会话作出不受限制的改变。还希望存储记录以用于单独的按需重放。用户可能想要向较大的观看者群组同时广播记录，或者在进行记录时实况流送记录。在重放之前或者在实况流送期间，可以通过可点击和交互式的内容或广告来替换网页的元素，可以基于可用于重放软件的数据针对群组或个人对所述内容或广告进行个性化。但是传统的视频记录并未提供这些特征。

有几个软件工具被用于用户体验研究和测试。传统的工具监测用户与网站的交互。这些用于“顾客体验管理”的工具由网站的开发者使用来监测网站访问者对网站的使用，通常是为了改进网站的可用性或者增加来自网站上的消费者购买的收益。这些软件工具必须由开发者安装在其自身的网站上。这些软件工具当中的一些监测从web浏览器到web服务器的请求，其他的软件工具则使用浏览器API来监测例如链接上的点击之类的用户交互。

这些软件工具被用于收集关于大量访问网站的人的数据，并且所述数据常常以热度图(heatmap)图表或汇总表(summary table)的形式被呈现。在被用于顾客体验管理的工具当中有用于“会话回放”的工具。会话回放是回放访问者在网站上或web应用内的旅程的能力。回放可以包括用户的视图(浏览器或屏幕输出)、用户输入(键盘和鼠标输入)以及网络事件的日志或控制台日志。其主要目的时帮助改进顾客体验，从而研究网站可用性和顾客行为。大多数提供会话回放的工具依赖于对于web浏览器会话的视频屏幕记录。一些高级的工具使用浏览器API来记录关于用户与网页的交互的数据。

被用于同样访问浏览器API的顾客体验管理的工具之间在技术和目的方面都存在关键差异。首先，被用于顾客体验管理的工具由web开发者仅安装在其自身的站点上。所述工具只能被用来记录和回放针对开发者自身的站点的访问。与此对照，希望记录和重放针对任何网站的访问。其次，被用于顾客体验管理的工具按照针对聚合分析和研究所设计的形式来保存数据。与此对照，希望按照允许在回放之前对web浏览器会话进行编辑的格式来保存数据。

传统的手段无法以所期望的细节或交互的水平来捕获、编辑和重放web浏览器会话。相应地，希望有一种出于娱乐或教育目的(而不仅仅是用于分析顾客行为)记录、编辑和再现web浏览器会话的系统和方法。还希望能够使用web浏览器本身作为媒介创建娱乐或教叙事，而不是作为视频来记录屏幕上交互。