hadoop for windows Wiki

解説 (Description)

Windows 7 (64bit), Windows 8.1 (64bit) で動作する非公式版の Hadoop および Hive, Spark, Drill, Sqoop, Flink そして Azkaban です。

ビルド済み Hadoop は、バージョン 2.6.0 です。

Hive は、バージョン 0.12.0 です。
Spark は、バージョン 1.2.0 です。
Flink は、バージョン 0.8.0 です。
Drill は、バージョン 0.7.0 です。
Sqoop は、バージョン 1.4.5 です。
Azkaban は、バージョン 2.6.4 です。

Hadoop 2.6.0 以外のアプリケーションは、動作に、MSYS/MinGW が必要です（Cygwinは、必要ありません）。
Hadoop 2.6.0 は、管理者権限で起動する必要があります。
Hadoop の動作に 64bit バージョンの Zlib1.dll が必要な場合があります。
クラスターを構成するには、別途 ssh を動作させる必要があります。

Spark は、本体とサンプルが別アーカイブされています。
本体とサンプルのダウンロード後に、サンプルを本体にマージしてください。

Drill は、本家の 0.7.0 と異なり、Hadoop 2.6.0 と Hive 0.12.0 に対応しています。
Sqoop は、本家の 1.4.5 と異なり、Hadoop 2.6.0 と Hive 0.12.0 に対応しています。
Sqoop で hive-import するとき、$HIVE_HOME/bin に hive.cmd を作成する必要があります。hive.cmd.sample.txt を参照してください。

ダウンロード (Download)

Hadoop 2.6.0 および関連アプリケーションのダウンロード

Hadoop 0.23.11 を含むすべてのダウンロード可能なファイル（作業部屋）

次はどこ (Where we go next)

QuickStart