2011年02月

昨日，複数のターミナルにコマンドをインタラクティブに実行する方法を適当にでっち上げたのだけど，それと似たことが出来る cluster SSH というものを教えてもらった．せっかくなのでちょいと試しに使ってみた．sudo apt-get install clusterssh で用意完了．

cluster SSH は、複数の ssh 接続を作って，それぞれにターミナルを用意して，もうひとつのウインドウにあるテキストフィールドへの入力を選択したターミナルにインタラクティブに送ってコマンドを実行できる．入力を送り出すターミナルの集合はGUIから選択できる．また，あとから ssh の接続を増やしたり減らしたり出来るみたい．

んで，cluster SSH だと，上矢印キーとかCrtl-Rとかのコントロールコードも即座に送ってくれるため，過去のコマンドを呼び出すのが一斉に簡単に出来る．これは良い機能．……それぞれのターミナルでヒストリが違う時には非常に困るけど．

昨日の方法だとコントロールコードを送るとか面倒だし１文字ずつ送るのも工夫がいる．

一方で，cluster SSH だと，for 文を回して各ターミナルに微妙に異なるコマンドを送り付けるという技が出来ない気がする．あと，コマンドを送り付けるターミナルの選択をスクリプトで自動的にやるとか出来ない気もする．そもそも，コマンドを入力するテキストフィールドに機械的にコマンドを投げ込む方法が分からない．

ということで，クラスタに対して均一な操作を加えるときには cluster SSH は非常に便利そうだなぁという印象．ソフトウェアのインストールとか．でも，変態的な使い方が出来そうに見えないのでつまらない気もする．

今回の論文を書くための実験で，複数のHadoopのクラスタセットひとつひとつに対応するターミナルを開き，それぞれで似たようなコマンドを実行して実験結果を取るという作業をした．コマンドをカットアンドペーストで全部のターミナルに張り付けて実行するとかバカすぎる．なんとかしたい．

という背景で，複数のターミナル（シェル）に対して一箇所から機械的にコマンドを打ち込みたい要求に駆られた．pssh とかだとインタラクティブに出来ないし，そもそも出力のためのターミナルは複数のウインドウにわかれていて欲しい．やりたいのは入力の一本化だけ．

単純に考えると，fifo を使って入力ターミナルからのコマンドを出力ターミナルの標準入力に送ればいい気がする．なので，とりあえず，出力用ターミナルで

cat pipe | bash

としておいて，入力用ターミナルでコマンドを

echo 'cd hoge' > pipe
echo 'ls' > pipe

とかやって送り付けようとした．

が，失敗．何故かコマンドをひとつ発行しただけで出力ターミナルの bash が終わってしまう．これでは複数のコマンドをインタラクティブに発行できず，psshと変わらない．これは望むものではないので原因を探って手法を改善せねばらない．

上の単純な仕組みが失敗した原因は次の通り：最初に送られたコマンドを出力側の bash が読み込んだとき，pipe が EOF に達してしまって "cat pipe | bash" のコマンドが終了してしまう．pipe には後から内容が追加されるけど，とりあえず最初のコマンドの後に一度はファイルの終端まで達するので，シェルのパイプが終了してしまう，と．

さてどうしたものか．

適当に検索してみたら同じようなことを考える人はいたようで，解決策が見つかった．"cat pipe | bash" の代わりに次を使えばいい．

tail -f pipe | bash

この tail の -f オプションは，EOFに達しても tail を止めずEOF後に追加された内容も後ろに吐く，という指定．手前のコマンドの出力のプログレスを表示するとかの目的に使われるオプションらしい．これをやっておけばコマンドを間隔を置いて複数送り付けることが出来る．

ということで，前準備＠入力ターミナル：

ps="1 2 4"
for p in $ps; do mkfifo pipe-$p; done

前準備＠出力ターミナル達：

tail -f pipe-1 | bash

tail -f pipe-2 | bash

tail -f pipe-4 | bash

あとは，適宜全部のターミナルに対して for 文使って少しずつ違うコマンド送ったり，一斉にコマンド発行したり，特定のターミナルにだけ cat 使ってインタラクティブに仕事したり，tee と合わせて特定のサブセットにだけコマンドを送ったり，等など．それなりに使い勝手が良い気がする．

for p in $ps; do echo "procs=$p" > pipe-$p; done
for p in $ps; do echo 'this is pipe-$procs' > pipe-$p; done
for p in $ps; do echo "./runExp.sh" > pipe-$p; done
...
cat | while read line; do echo $line; done > pipe-4
...
cat | while read line; do echo $line; done | tee pipe-2 | tee pipe-4
...
for p in $ps; do echo "cat result-$p.txt" > pipe-$p; done

cat の while read line は１行単位でコマンドを送るため．ここらへんは関数を定義しておいたほうが頭よさげ．

あとは最初のセットアップのところを for 文でいけると楽．ということで，出力ターミナルを一斉に作ってパイプをつなぐコマンド：

for p in $ps; do (echo "(echo 'echo this is pipe-$p'; tail -f pipe-$p) | bash" > pipe-$p &) ;( gnome-terminal -x bash pipe-$p &); done

これで満足．