這種方法好比:比如在節(jié)假日的時候,某個收費口的車輛特別多,那個時候執(zhí)法人員就會封閉這個收費站的出口,等車輛過的差不多的時候再給開放。這次的方案有這個有點類似,當(dāng)主機的dfs.datanode.du.reserved值高于目前磁盤使用的情況,namenode就不會分配數(shù)據(jù)過來了,通過升降副本和balance能快速的將本機的數(shù)據(jù)轉(zhuǎn)移走。
四、結(jié)束語
本篇文章主要介紹了對hadoop數(shù)據(jù)出現(xiàn)不均衡情況下可以使用的方法,及我們情況下使用的方案!