Posted at

distcpする際にhdfsプロトコル使用して、HA構成のnamenodeをホスト名なしで書きたいとき

More than 3 years have passed since last update.

distcpでhdfsプロトコル使う際ホスト名をURLに書くが、HA構成でアクティブスタンバイが切り替わった時に、URLが使えなくなってします。

そんなときはnameservice1を使いましょう

ホスト名指定の書き方

hdfs://hogehoge101.jp.local/path/to/file

HA対応な書き方

hdfs://nameservice1/path/to/file