2011年08月05日

今度の症状は datanode が namenode に接続できないというもの．ログをみると

INFO org.apache.hadoop.ipc.Client: Retrying connect to server: namenode/:8020. Already tried 9 time(s).
INFO org.apache.hadoop.ipc.RPC: Server at namenode/:8020 not available yet, Zzzzz...

とかいうのが延々と……

で，結局のところ conf/core-site.xml で namenode の名前を FQN で書かずにホスト名だけで書いていたので namenode の RPC 受付けポートが 127.0.1.1:8020 とかになっていたというオチ（/etc/hosts に 127.0.1.1 namenode という記述がデフォルトで入ってたから）．これじゃあ外から繋がらない．

これに気づくまでに半日かかった．アホだ……

閑話休題．

とりあえず動くようになったので動かしたら並列化の効果ばっちり．数の暴力バンザイ．