hadoop

hadoop

Apache Hadoop 2.3.0 リリース

Apache Hadoop 2.3.0 公開! 昨日、Apache Hadoop 2.3.0 が公開されました! 全く貢献できていませんが、公開おめでとうございます! New Releaseに書かれている注目すべき機能はこの3つのようで...
hadoop

Hadoopにlzoの環境構築(1)

12日目です 今更ながら手元のHadoopクラスタにLZOの環境を構築しました。 Cloudera ManagerにはLZOのPercelレポジトリがあります。Cloudera Manager経由で構築した環境であれば、あえてソースからビル...
hadoop

MapReduce v1のスケジューリングアルゴリズム

3日目です。 本日のHadoopアドベントカレンダー2013は@shiumachi氏の「HBase 0.96 で導入される新しいコンパクション「Exploring Compaction」」です。コンパクションも進化しているということがわかり...
cloudera

HDFSとMapReduceのハートビートの設定

2日目です。書き溜めた技術情報を書き続けてみるテスト中。 技術ネタ HDFSのハートビートなど a) ハートビート(デフォルト3秒: dfs.heartbeat.interval) 1) DataNodeからNameNodeに...
hadoop

2013年の象(Hadoop)四方山話

Hadoopアドベントカレンダー2013、1日目です。 みんな大好き、かわいい象のマスコット(画像)でお馴染みのApache Hadoop(以下Hadoop)。運良く初日を取れたので、2013年のHadoop関連の話題をまとめてみました。...
hadoop

Hadoopオペレーション(パカ本)、日本語版発売!

本日、オライリーさんからHadoopオペレーションが発売されました!
hadoop

Hadoopアドベントカレンダー 2013

Hadoop advent calendar 2013 今年もあります。是非皆さんもご参加下さい!(せっかくのお祭り?ですし、思いっきり濃い技術ネタでも、軽い話でも無問題です。一緒に盛り上がりましょう!) なお、昨年までのカレンダーはこち...
CDH5

CDH5 ベータ1 のNFSv3ゲートウェイを試してみました

HDFSのNFSv3 Gateway機能を試してみる 以前の記事にも書きましたが、Hadoop 2.2.0の新機能の一つに「NFSv3に対応」という点があります。「CDH5 beta1を速攻で試す!」でCDH5b1のパッケージをみたように、...
cloudera

「Hadoopを40分で理解する」のスライド公開!

(2014/12/10追記)Hadoop入門になりそうなブログをまとめたページを作成しました。-> Hadoopを10分で試す Cloudera World 2013の資料が公開されました 先週開催されたCloudera World ...
cloudera

Hadoopを40分で理解する

というタイトルで、Cloudera World Tokyo 2013で講演をさせていただきました。