CN118550711B 一種算力效能提升方法及系統(tǒng) （廣脈科技股份有限公司）

本發(fā)明提出了一種算力效能提升方法及系習模型對任務執(zhí)行順序以及分配的計算資源進2對即將執(zhí)行的任務進行分析，結合任務特性，評估任務特征對計算資源的基于自適應資源管理系統(tǒng)的實時監(jiān)測數(shù)據(jù)，獲取當前在任務執(zhí)行前，對任務進行分割和并行化處理；并通過優(yōu)化在任務執(zhí)行過程中，實時監(jiān)測計算資源的狀態(tài)和任務的執(zhí)行情利用基于歷史執(zhí)行數(shù)據(jù)的深度學習模型，對任務執(zhí)行順序和計算資源分配進行預測，根據(jù)業(yè)務需求，確定所需的計算資源類型和數(shù)量，并對每種計算在物理和/或虛擬環(huán)境中部署異構計算環(huán)境，并通過基準測試和模擬任務對環(huán)境的性通過自適應資源管理系統(tǒng)，實時收集計算資源的使用情況，并對實根據(jù)歷史數(shù)據(jù)和當前趨勢，對資源需求情況進行預測；基于多因素3從異構計算環(huán)境中收集歷史執(zhí)行數(shù)據(jù)，并對收集到的歷史執(zhí)行數(shù)據(jù)使用訓練好的深度學習模型對任務執(zhí)行順序和計算資源分配進行環(huán)境構建模塊：構建集成多類型計算資源的異構計算環(huán)境，所述習模型對任務執(zhí)行順序以及分配的計算資源進行預測和優(yōu)化，并結合自適應資源管理系對即將執(zhí)行的任務進行分析，結合任務特性，評估任務特征對計算資源的基于自適應資源管理系統(tǒng)的實時監(jiān)測數(shù)據(jù)，獲取當前在任務執(zhí)行前，對任務進行分割和并行化處理；并通過優(yōu)化在任務執(zhí)行過程中，實時監(jiān)測計算資源的狀態(tài)和任務的執(zhí)行情利用基于歷史執(zhí)行數(shù)據(jù)的深度學習模型，對任務執(zhí)行順序和計算資源分配進行預測，4數(shù)據(jù)預處理模塊：從異構計算環(huán)境中收集歷史執(zhí)行數(shù)據(jù)，并對收分配預測模塊：使用訓練好的深度學習模型對任務執(zhí)行順序和計算資源分配進行預5[0014]在物理和/或虛擬環(huán)境中部署異構計算環(huán)境，并通過基準測試和模擬任務對環(huán)境6[0020]從異構計算環(huán)境中收集歷史執(zhí)行數(shù)據(jù)，并對收集到的歷[0028]基于自適應資源管理系統(tǒng)的實時監(jiān)測數(shù)據(jù)，獲取當前計算資源的狀態(tài)和使用情7[0056]基于自適應資源管理系統(tǒng)的實時監(jiān)測數(shù)據(jù)，獲取當前計算資源的狀態(tài)和使用情89資源進行動態(tài)分配并對任務進行智能調度，確保任務能夠按照最優(yōu)順序和分配策略執(zhí)行。由于采用了自適應和預測的方法，系統(tǒng)能夠在資源使用和任務執(zhí)行過程中進行實時調整，[0077]根據(jù)計算資源的異構性和任務間的依賴關系設計協(xié)同工作策略，包括任務分配、[0078]在物理和/或虛擬環(huán)境中部署異構計算環(huán)境，并通過基準測試和模擬任務對環(huán)境資源能夠高效支持任務的執(zhí)行。構建計算資源互連架構，選擇適當?shù)倪B接方式（如PCIe、所選資源能夠高效支持任務的執(zhí)行，提高計算效能。構建的計算資源互連架構（如PCIe、[0088]上述技術方案的效果為：自適應資源管理系統(tǒng)能夠實時收集計算資源的使用情[0090]從異構計算環(huán)境中收集歷史執(zhí)行數(shù)據(jù)，并對收集到的歷[0100]基于自適應資源管理系統(tǒng)的實時監(jiān)測數(shù)據(jù)，獲取當前計算資源的狀態(tài)和使用情表示任務列表或與計算資源相關的任務集合，F(xiàn)表示任務特征的數(shù)量或影響承載能力的務依賴關系進行建模和分析。這有助于確定任務執(zhí)行的先后順序和潛在的并行執(zhí)行機會。分割成適合在不同計算資源上執(zhí)行的子任務。這樣可以更好地利用不同類型的計算資源，[0116]上述技術方案的效果為：務分割和并行化處理可以顯著降低整體任務的執(zhí)行時和并行性，可以確保在并行執(zhí)行過程中不會因為依賴關系而導致某些任務無法開始執(zhí)行，資源進行動態(tài)分配并對任務進行智能調度，確保任務能夠按照最優(yōu)順序和分配策略執(zhí)行。由于采用了自適應和預測的方法，系統(tǒng)能夠在資源使用和任務執(zhí)行過程中進行實時調整，[0137]策略設計模塊：根據(jù)計算資源的異構性和任務間的依賴資源能夠高效支持任務的執(zhí)行。構建計算資源互連架構，選擇適當?shù)倪B接方式（如PCIe、所選資源能夠高效支持任務的執(zhí)行，提高計算效能。構建的計算資源互連架構（如PCIe、[0148]上述技術方案的效果為：自適應資源管理系統(tǒng)能夠實時收集計算資源的使用情[0160]基于自適應資源管理系統(tǒng)的實時監(jiān)測數(shù)據(jù)，獲取當前計算資源的狀態(tài)和使用情表示任務列表或與計算資源相關的任務集合，F(xiàn)表示任務特征的數(shù)量或影響承載能力的