[发明专利]一种任务驱动的码流结构化图像编码方法

摘要

本发明涉及一种任务驱动的码流结构化图像编码方法，包括：码流结构化编码器和解码器，码流结构化编码器实现输入图像的结构化表示和压缩，解码器根据压缩得到的特征对输入图像进行重构；所述码流结构化编码器包括：特征提取、目标检测、量化、预测编码过程和基于对象的码流划分过程；本发明对图像进行编码，编码过程中在特征层面检测对象，并基于检测结果进行结构化码流的生成，以实现根据不同的智能分析任务针对性选择部分结构化码流或者全部码流进行解析的目的，使得图像编码传输应用这一过程更为高效和灵活。

主权项

1.一种任务驱动的码流结构化图像编码方法，其特征在于，包括：码流结构化编码器和解码器，码流结构化编码器实现输入图像的结构化表示和压缩，解码器根据压缩得到的特征对输入图像进行重构；所述码流结构化编码器包括：特征提取、目标检测、量化、预测编码过程和基于对象的码流划分过程；特征提取过程，对输入图像进行多尺度特征提取和融合，其输出的特征同时作为量化和目标检测的输入；目标检测过程，包含一个区域决策模块和对齐模块，对所述特征进行基于对象的检测，输出检测结果辅助结构化编码的实现，实现过程为：输入的所述特征通过区域决策模块得到所有对象可能存在区域的边界框(bounding boxes)，所有可能结果经过对齐模块处理后，进行分类任务，并对每个边界框(bounding boxes)计算损失函数，随后通过阈值处理，判决得到得分最高的结果作为最终输出结果，输出结果包括边界框和类别标签；量化过程，对输入的所述特征做数字化的处理；预测编码过程，预测编码模块根据压缩结果即特征提取的输出，预测后续的特征值，根据重建图像内容自适应地调整局部区域码率，生成重要性映射图，从而更好地控制率失真的平衡，得到更好的压缩性能；基于对象的码流划分过程：将量化后的特征在空间维度上进行基于对象的划分，划分依据为目标检测的输出结果，即边界框和类别标签，划分过程为：在量化后的特征上，根据边界框切割出对象对应的区域，类别标签指明对象的类别信息；经过划分的不同部分特征将依次通过熵编码处理形成结构化的码流，同时，边界框和类别标签将会被编码到头信息中。