[发明专利]一种基于kafka-connect的数据传递方法

权利要求书

1.一种基于kafka-connect的数据传递方法，其特征在于，包括：

生成与源kafka的topic对应的kafka-connector，并通过kafka-connector生成对应的task任务；

task任务监听该源kafka的topic是否有数据变化；

如果确定task任务监听该源kafka的topic有数据变化，则判断源kafka是否与目标kafka联通；

如果源kafka与目标kafka联通，执行推送数据到目标kafka的逻辑，并通过kafka-connector记录对应的推送位置。

2.根据权利要求1所述的方法，其特征在于，该方法还包括：

如果确定源kafka与目标kafka不联通，task任务继续监测对应的目标kafka的联通性。

3.根据权利要求1所述的方法，其特征在于，该方法还包括：

在执行推送数据到目标kafka的逻辑步骤时，当源kafka与目标kafka断开联通，记录推送数据到目标kafka的原推送位置，且在源kafka与目标kafka再次联通时，直接推送数据至原推送位置所对应的目标kafka中。

4.根据权利要求1所述的方法，其特征在于，该方法还包括：

定时去检查kafka-connector的状态，并判断kafka-connector的状态是否正常；

如果确定kafka-connector的状态不正常，对不正常的kafka-connector进行清理，并重新生成新的kafka-connector。

5.根据权利要求1所述的方法，其特征在于，所述判断源kafka是否与目标kafka联通的步骤包括：

判断是否需要发送目标数据；

如果是，则从目标数据中解析出目标kafka的端口和IP地址；

判断目标kafka的端口与IP地址是否联通。

6.根据权利要求5所述的方法，其特征在于，所述判断目标kafka的端口与IP地址是否联通的步骤包括：

解析出目标数据中的附加字节，并将附加字节发送给IP地址，其中目标数据包括用于试探源kafka和目标kafka是否联通的附加字节；

判断是否返回确认指令；

如果返回确认指令，确定该目标kafka的端口和IP地址联通；

如果不返回确认指令，确定该目标kafka的端口和IP地址不联通。