hadoop

hadoop

Apache Hadoop 2.3.0 リリース

Apache Hadoop 2.3.0 公開!昨日、Apache Hadoop 2.3.0 が公開されました!全く貢献できていませんが、公開おめでとうございます!New Releaseに書かれている注目すべき機能はこの3つのようです。
hadoop

Hadoopにlzoの環境構築(1)

12日目です今更ながら手元のHadoopクラスタにLZOの環境を構築しました。Cloudera ManagerにはLZOのPercelレポジトリがあります。Cloudera Manager経由で構築した環境であれば、あえてソースからビルドす...
hadoop

MapReduce v1のスケジューリングアルゴリズム

3日目です。本日のHadoopアドベントカレンダー2013は@shiumachi氏の「HBase 0.96 で導入される新しいコンパクション「Exploring Compaction」」です。コンパクションも進化しているということがわかりま...
cloudera

HDFSとMapReduceのハートビートの設定

2日目です。書き溜めた技術情報を書き続けてみるテスト中。技術ネタHDFSのハートビートなどa) ハートビート(デフォルト3秒: dfs.heartbeat.interval)1) DataNodeからNameNodeに一定間隔で送付さ...
hadoop

2013年の象(Hadoop)四方山話

Hadoopアドベントカレンダー2013、1日目です。みんな大好き、かわいい象のマスコット(画像)でお馴染みのApache Hadoop(以下Hadoop)。運良く初日を取れたので、2013年のHadoop関連の話題をまとめてみました。※こ...
hadoop

Hadoopオペレーション(パカ本)、日本語版発売!

本日、オライリーさんからHadoopオペレーションが発売されました!
hadoop

Hadoopアドベントカレンダー 2013

Hadoop advent calendar 2013今年もあります。是非皆さんもご参加下さい!(せっかくのお祭り?ですし、思いっきり濃い技術ネタでも、軽い話でも無問題です。一緒に盛り上がりましょう!)なお、昨年までのカレンダーはこちら。
CDH5

CDH5 ベータ1 のNFSv3ゲートウェイを試してみました

HDFSのNFSv3 Gateway機能を試してみる以前の記事にも書きましたが、Hadoop 2.2.0の新機能の一つに「NFSv3に対応」という点があります。「CDH5 beta1を速攻で試す!」でCDH5b1のパッケージをみたように、N...
cloudera

「Hadoopを40分で理解する」のスライド公開!

(2014/12/10追記)Hadoop入門になりそうなブログをまとめたページを作成しました。-> Hadoopを10分で試すCloudera World 2013の資料が公開されました先週開催されたCloudera World Tokyo...
cloudera

Hadoopを40分で理解する

というタイトルで、Cloudera World Tokyo 2013で講演をさせていただきました。