1.一種支持多源異構數據的處理方法,其特征在于,所述方法包括:
2.根據權利要求1所述的一種支持多源異構數據的處理方法,其特征在于,將解析成功的數據構成正確數據集,解析失敗的數據構成錯誤數據集;根據數據結構類型,利用聚類算法將正確數據集內的數據分為多個子數據集;
3.根據權利要求2所述的一種支持多源異構數據的處理方法,其特征在于,所述動態調整擴展插件的輪詢間隔,以保證目標系統的權限模型能夠及時映射,包括:
4.根據權利要求3所述的一種支持多源異構數據的處理方法,其特征在于,所述通過滑動窗口加權平均延遲和比例積分控制算法動態計算新輪詢間隔,包括:
5.根據權利要求4所述的一種支持多源異構數據的處理方法,其特征在于,所述定義全局策略還包括:
6.根據權利要求5所述的一種支持多源異構數據的處理方法,其特征在于,所述構建多條與etl路徑并行的實時流水線對采集到的數據進行處理,包括:
7.根據權利要求6所述的一種支持多源異構數據的處理方法,其特征在于,所述構建漸進切換策略,控制etl向實時流水線切換的過程,逐步將目標系統的etl數據處理任務切換至實時流水線,包括:
8.根據權利要求7所述的一種支持多源異構數據的處理方法,其特征在于,所述構建漸進切換策略,控制etl向實時流水線切換的過程,逐步將目標系統的etl數據處理任務切換至實時流水線,還包括:
9.根據權利要求8所述的一種支持多源異構數據的處理方法,其特征在于,所述利用數據倉庫內數據創建可視化的動態報表,通過預訓練的機器學習模型對動態報表數據進行分析預測,并將預測結果寫入動態報表,包括:
10.一種支持多源異構數據的處理系統,包括服務器、處理器、與處理器連接的多個數據采集接口、通信模塊和存儲器,所述處理器通過通信模塊與服務器連接,其特征在于,所述系統用于執行上述權利要求1-9中任意一項所述的一種支持多源異構數據的處理方法。