hadoop の環境設定(datanode)

mass00 以外に datanode を追加する手順のメモ。

hadoop 自体の環境設定は以下のページを参照

hadoop 環境設定?

設定

hadoop 関連のファイルは $HOME/share/hadoop のなかに入っている。この設定方法は $HOME/share/hadoop/settingLog.txt にも書いてある。

datanode として追加したいPCにsshして以下のコマンドを実行

cd $HOME/share/hadoop/hadoop-2.0.0-alpha
sudo sh -v mkdir01.sh
./bin/hdfs namenode -format

(以下${HADOOP_PREFIX}を $HOME/share/hadoop/hadoop-2.0.0-alpha とする。)

次に、mass00 にログインをして、slaves に今追加したPCの address を追加する。

emacs ${HADOOP_PREFIX}/etc/hadoop/slaves

起動する。

 ${HADOOP_PREFIX}/sbin/start-all.sh

シャットダウンする。

${HADOOP_PREFIX}/sbin/stop-all.sh

ログを見たい時はそのノードの /var/local/hadoop/log/ 辺りをみるといい。


トップ   新規 一覧 単語検索 最終更新   ヘルプ   最終更新のRSS
Last-modified: 2012-05-27 (日) 00:52:37 (2750d)