[发明专利]低延迟混合现实头部可佩戴装置

摘要

本发明涉及一种头部可佩戴装置、方法及系统。公开了头部可佩戴装置，包括：一显示器、一摄像机、一缓冲器和一处理器，缓冲器被配置用以缓冲与来自摄像机中的真实场景图像对应的真实场景图像数据的一部分，处理器被配置用以：执行组合失真校正操作；执行前景分离；对混合值执行平滑操作；执行色差失真校正操作；接收与虚拟场景图像对应的虚拟场景图像数据；将虚拟场景图像数据与处理的真实场景图像数据混合来创建混合现实场景图像作为混合现实场景图像数据；并将混合现实场景图像数据输出到显示器用以展示给用户。

主权项

1.一种头部可佩戴装置，包括：一显示器；一摄像机，被配置用以捕捉真实场景图像；与所述摄像机通信耦合的一缓冲器，所述缓冲器被配置用以缓冲与来自所述摄像机的所述真实场景图像对应的至少一部分真实场景图像数据；和与所述缓冲器通信耦合的至少一个处理器，所述至少一个处理器被配置用以：对所述真实场景图像执行组合失真校正操作，以校正由所述摄像机的镜头引起的失真，同时校正由显示器所引起的失真，其中组合失真校正操作的执行产生失真校正的真实场景图像数据；对所述失真校正的真实场景图像数据进行前景分离操作，为所述失真校正的真实场景图像数据的每个像素生成一混合值；对所述混合值执行平滑操作，其中所述平滑操作的执行生成平滑的混合值；对所述失真校正的真实场景图像数据的红色通道、绿色通道和蓝色通道中的每一个和与所述红色通道、绿色通道和蓝色通道中每一个相关的平滑的混合值执行色差失真校正操作，其中的所述色差失真校正操作的执行生成红色通道处理的真实场景图像数据、绿色通道处理的真实场景图像数据、蓝色通道处理的真实场景图像数据、以及与所述红色通道处理的真实场景图像数据、所述绿色通道处理的真实场景图像数据和所述蓝色通道处理的真实场景图像数据相关的处理的混合值；接收与一虚拟场景图像对应的虚拟场景图像数据；至少基于处理的混合值，混合所述红色通道处理的真实场景图像数据、所述绿色通道处理的真实场景图像数据和蓝色通道处理的真实场景图像数据与所述虚拟场景图像数据，以创建一混合现实场景图像作为混合现实场景图像数据；和将所述混合现实场景图像数据输出到所述显示器以展示给用户。