19

把集群升级到20.1之后,map/reduce的效率提升的不是一点半点啊。

升级步骤:

  1. 执行./bin/stop-all.sh
  2. mv 旧版本到一个新的目录
  3. 把配置好的新版本mv过来
  4. 同步到各个机器上
  5. hadoop namenode -upgrade
  6. 启动集群

原先在19.2上需要执行2个多小时的job,到新版本只需要1小时零几分就能完成了。


Tags: ,

作者:Jock

Leave a Reply

You must be logged in to post a comment.

Switch to our mobile site