自分用メモ

起動・終了

hadoopコマンド

PATHにbinディレクトリの場所を追加しておくと便利かも。

使用方法

hadoop COMMAND
COMMAND
書式オプション説明
fs オプションHDFSを操作
-cat ファイルファイルの内容を標準出力に出力
-copyFromLocal コピー元 コピー先ローカルからHDFSにファイルコピー
-ls [ディレクトリ]ディレクトリの内容を表示
-mkdir ディレクトリ名ディレクトリ作成
-rm ファイルファイル削除
-rmr ディレクトリファイルごとディレクトリ削除
jar jarファイル mainクラス [入力元] [出力先]jarファイル実行
CLASSNAME名前がCLASSNAMEであるクラスを実行
(例)bin/hadoop jar /usr/joe/wordcount.jar org.myorg.WordCount /usr/joe/wordcount/input /usr/joe/wordcount/output

参考

管理人/副管理人のみ編集できます