labs.beatcraft.com

Hadoopについて

Hadoopは大規模分散システムのOpen Source Projectの1つです。主な特徴はHDFS、MapReduceがあります。HDFSはブロックサイズがデフォルトで64MBと非常に大きく(ex3のデフォルトブロックサイズは4096バイト)、テラバイトからペタバイトのデータサイズを扱う分散ファイルシステムです。MapReduceは並列分散処理のためのフレームワークです。このページではHadoopを導入する手順、動作確認手順などを記載しています。

Hadoopの詳細についてはApache Hadoopをご覧ください。

Hadoop/Atom-Server

Atom ServerにHadoopを導入する手順について記載しています。

Hadoop/Atom-Server
Atom ServerにHadoopの完全分散モードを導入する手順について記載しています。
試験的なバージョンです。HadoopのバージョンはCDH3beta4のHadoop-0.20.2をしています。

Hadoop/VMware

VMwareイメージにHadoopを導入する手順について記載しています。

Hadoop/VMware
VMwareイメージ上ににHadoopを導入する手順とローカルモード、擬似分散モードでの動作確認について記載しています。
試験的なバージョンです。HadoopのバージョンはCDH3beta4のHadoop-0.20.2をしています。


BC::labsへの質問は、bc9-dev @ googlegroups.com までお願い致します。
トップ   編集 凍結 差分 バックアップ 添付 複製 名前変更 リロード   新規 一覧 単語検索 最終更新   最終更新のRSS
Last-modified: 2011-04-15 (金) 19:51:53 (2265d)