8t's BBR

よくつまったあれこれをメモ

2016-05-01から1ヶ月間の記事一覧

Hadoopクラスタ構成への道 ~完全分散編~

※疑似分散までは前記事を参照 Hadoopクラスタ構築への道 ~疑似分散編~ - 8t's BBR ※前記事の続きという形で 準備 まずはHadoopクラスタを組みたいサーバーすべてにHadoopを入れます。 一つ一つ手作業でやってもいいですが、疑似分散までできているサーバー…

Hadoopクラスタ構築への道 ~疑似分散編~

※HadoopはCDHではなく、Apacheの公式ページからビルド ※完全分散は別記事。ここでは疑似分散まで 環境 OS: ubuntu14.04 user: ubuntu hadoop-2.7.2 Javaのインストール まずはjava7をダウンロード ※hadoop-2.7の時点ではjava8はまだ対応していない # リポジ…

複数の仮想マシンを互いにSSHで接続

Hadoopでの完全分散を行うにあたり、クラスタ構成をとりあえず実験的にすべて仮想マシンにしてみた時の各仮想マシンのSSHの設定の仕方 環境 ubuntu 14.04 ネットワークに関する設定は一切していないと仮定 目標 SSHで互いのマシンにパスワードなしで接続 ま…