19

把集群升级到20.1之后,map/reduce的效率提升的不是一点半点啊。

升级步骤:

  1. 执行./bin/stop-all.sh
  2. mv 旧版本到一个新的目录
  3. 把配置好的新版本mv过来
  4. 同步到各个机器上
  5. hadoop namenode -upgrade
  6. 启动集群

原先在19.2上需要执行2个多小时的job,到新版本只需要1小时零几分就能完成了。

Tags: ,

作者:Jock

Switch to our mobile site