MapReduce

MRUnit導入

概要 MRUnit:MapReduceテスト用ライブラリ 今回は、0.5.0をインストールする。 ダウンロード ダウンロード(Apache):http://ftp.jaist.ac.jp/pub/apache//incubator/mrunit/stable/ インストール apache-commons-configuration apache-commons-lang がない…

MapReduceデザインパターン

目次 概要 in-mapper conbinerパターン 参考サイト TODO テンプレ 概要 Hadoop MapReduce デザインパターン ―MapReduceによる大規模テキストデータ処理の3章の簡単なまとめ。 in-mapper combinerパターン 処理の概要 Mapper ↓ ローカル(各ノード) ---------…