[发明专利]基于传输机的数据传输方法、装置、设备和存储介质

说明书

本申请公开了基于传输机的数据传输方法、装置、设备和存储介质，涉及大数据领域，可用于自动驾驶中的海量数据传输。具体实现方案为：获取当前传输机的并发度总门限、以及当前传输机中的每一任务的实际并发度，任务具有优先级，并发度总门限为实际并发度总和的上限值；根据并发度总门限和每一任务的实际并发度，确定不同优先级的待传输任务的期望并发度，期望并发度表征为待传输任务所分配的资源数目，不同优先级的待传输任务的期望并发度是不同的；启动与每一待传输任务的期望并发度表征的资源数目对应的资源，分别传输每一待传输任务。为不同的任务分配不同数目的资源；可以使得任务被成功和快速传输；保证了资源不被闲置，不会浪费资源。

技术领域

本申请实施例涉及计算机技术中的大数据领域，尤其涉及一种基于传输机的数据传输方法、装置、设备和存储介质，可用于自动驾驶中的海量数据传输。

背景技术

随着计算机技术的发展，产生和处理的数据量也越来越大。可以通过传输机对海量的数据进行传输和处理。例如，在无人驾驶领域中，在获取了无人驾驶车辆上的数据之后，可以将数据写入到磁盘中；磁盘与传输机连接，进而传输机将数据进行传输和处理。

现有技术中，传输机需要处理大量的任务(即，数据的传输任务)，进而对数据进行传输和处理，传输机可以为每一任务分配相同资源，进而利用资源传输任务。

然而现有技术中，由于传输机为每一任务分配相同资源，会导致有的任务的资源不足，导致数据的传输任务的传输延迟；或者会导致有的资源被闲置，进而浪费资源。

发明内容

本申请提供了一种用于为不同任务分配不同资源，提升任务传输效率，并避免浪费资源的基于传输机的数据传输方法、装置、设备和存储介质。

根据第一方面，提供了一种基于传输机的数据传输方法，所述方法应用于传输机，所述方法包括：

获取当前传输机的并发度总门限、以及当前传输机中的每一任务的实际并发度，其中，所述任务具有优先级，所述并发度总门限为实际并发度总和的上限值，所述实际并发度总和为所述每一任务的实际并发度之和；

根据所述并发度总门限和所述每一任务的实际并发度，确定不同优先级的待传输任务的期望并发度，其中，所述期望并发度表征为待传输任务所分配的资源数目，不同优先级的待传输任务的期望并发度是不同的；

启动与每一待传输任务的期望并发度表征的资源数目对应的资源，分别传输所述每一待传输任务。

根据第二方面，提供了一种基于传输机的数据传输装置，所述装置应用于传输机，所述装置包括：

第一获取单元，用于获取当前传输机的并发度总门限、以及当前传输机中的每一任务的实际并发度，其中，所述任务具有优先级，所述并发度总门限为实际并发度总和的上限值，所述实际并发度总和为所述每一任务的实际并发度之和；

第一确定单元，用于根据所述并发度总门限和所述每一任务的实际并发度，确定不同优先级的待传输任务的期望并发度，其中，所述期望并发度表征为待传输任务所分配的资源数目，不同优先级的待传输任务的期望并发度是不同的；

启动单元，用于启动与每一待传输任务的期望并发度表征的资源数目对应的资源，分别传输所述每一待传输任务。

根据第三方面，提供了一种基于传输机的数据传输方法，所述方法应用于传输机，所述方法包括：

根据当前传输机的并发度总门限和当前传输机中的每一任务的实际并发度，确定不同优先级的待传输任务的期望并发度，其中，所述任务具有优先级，所述并发度总门限为实际并发度总和的上限值，所述实际并发度总和为所述每一任务的实际并发度之和；所述期望并发度表征为待传输任务所分配的资源数目，不同优先级的待传输任务的期望并发度是不同的；

启动与每一待传输任务的期望并发度表征的资源数目对应的资源，分别传输所述每一待传输任务。