hadoop
reduce処理で「Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out.」と出て戦ったのでメモ。 原因としては各ノードのホスト名(と対応するIPアドレス)が127.0.0.1で通信不能だったため。↓のようなNICを複数持っている構成の場合(ホスト名=127.…
reduce処理で「Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out.」と出て戦ったのでメモ。 原因としては各ノードのホスト名(と対応するIPアドレス)が127.0.0.1で通信不能だったため。↓のようなNICを複数持っている構成の場合(ホスト名=127.…