摘要:一種Hadoop同構集群下的資源參數優化方法,包括建立同構集群的作業特征庫;在默認配置下,用新作業的部分數據來運行作業,獲取新作業的資源占用特征Fs;計算作業特征庫中每一個作業的資源占用特征F與Fs的相對距離;取作業特征庫中與Fs的相對距離最小的那個作業的參數最優取值,作為新作業s的最優取值;以新作業s的參數最優取值配置集群,完整運行新作業。本發明的有益效果:提高作業運行的執行效率;提高集群的資源使用率,避免集群資源浪費或爭奪;建立作業特征庫,方便后期作業分析和優化。
- 專利類型發明專利
- 申請人四川大學;
- 發明人陳興蜀;曾婉琳;羅永剛;王文賢;
- 地址610065 四川省成都市武侯區一環路南一段24號
- 申請號CN201410171929.0
- 申請時間2014年04月25日
- 申請公布號CN103942108B
- 申請公布時間2017年03月01日
- 分類號G06F9/50(2006.01)I;