[发明专利]基于图像的内容的基于深度的投影

权利要求书

1.一种投影系统，包括：

通信耦合到包括照明电路的图像投影子系统的电路，其中所述电路被配置为：

接收将被投影在三维(3D)结构的物理表面上的图像帧序列；

控制深度传感器获取与物理表面相关联的深度数据；

将包括所获取的深度数据和所接收到的图像帧序列中的第一图像帧的第一输入馈送到基于神经网络的模型；

作为基于神经网络的模型针对所馈送的第一输入的第一输出接收几何校正值的集合；

基于所接收到的几何校正值的集合对第一图像帧进行修改；以及

控制照明电路将经过修改的第一图像帧投影到物理表面上。

2.根据权利要求1所述的投影系统，其中，所述电路还被配置为：

确定与物理表面的各个角相关联的第一深度值；

基于所确定的第一深度值生成针对物理表面的虚拟深度数据；

将所获取的深度数据与所生成的虚拟深度数据进行比较以生成比较结果；

对所述比较结果应用聚簇方法以将物理表面划分为各个表面簇，其中每一个表面簇对应于物理表面的一个或多个表面部分；

针对每一个表面簇计算平滑度值；

基于所计算的平滑度值将物理表面的一个或多个部分归类为不同的类别；以及

基于所述归类确定物理表面的均匀表面部分，

其中，经过修改的第一图像帧被投影到所确定的均匀表面部分上。

3.根据权利要求1所述的投影系统，其中，所述基于神经网络的模型包括卷积神经网络，并且所述第一输入首先被馈送到所述卷积神经网络。

4.根据权利要求3所述的投影系统，其中，所述电路还被配置为：

将所获取的深度数据输入到卷积神经网络；

接收卷积神经网络针对所输入的深度数据的输出，

其中，所接收到的输出包括表明物理表面的一个或多个均匀表面部分和物理表面的一个或多个不均匀表面部分的聚簇结果；并且

确定所述一个或多个均匀表面部分当中的具有最大尺寸的均匀表面部分，其中基于所述聚簇结果来确定均匀表面部分。

5.根据权利要求4所述的投影系统，其中，所述电路还被配置为：

提取与所确定的均匀表面部分的各个角相关联的坐标值；

基于所提取的坐标值对第一图像帧进行尺寸调整；以及

基于所接收到的几何校正值的集合对经过尺寸调整的第一图像帧进行修改，

其中，经过修改的第一图像帧被投影到物理表面的所确定的均匀表面部分上。

6.根据权利要求4所述的投影系统，其中，经过修改的第一图像帧被投影到所确定的均匀表面部分上。

7.根据权利要求4所述的投影系统，其中，所述基于神经网络的模型还包括人工神经网络，其输入层耦合到卷积神经网络的输出层。

8.根据权利要求7所述的投影系统，其中，所述电路还被配置为：

确定与所确定的均匀表面部分的各个角相关联的投影长度值的集合；以及

将所确定的投影长度值的集合输入到人工神经网络，

其中，人工神经网络基于所输入的投影长度值的集合生成包括几何校正值的集合的第一输出。

9.根据权利要求1所述的投影系统，其中，第一图像帧的修改包括在保持第一图像帧的纵横比的同时对第一图像帧应用图像扭曲操作。

10.根据权利要求1所述的投影系统，还包括图像投影子系统，所述图像投影子系统包括照明电路。