CERNで実施したベンチマークが公開されています

CERNが公開した、

「Apache Hadoopエコシステムにおける、異なるファイル形式とストレージエンジンのパフォーマンス比較」

を日本語化して公開しました。

Apache Avro, Apache Parquet, Apache HBase, Apache Kuduそれぞれの特性が興味深いです。取り込み重視なのか分析重視なのか、長期保存目的か、はたまた折衷なのかによって何を選択するべきかの参考になります。

これは必読です!

 

 

ImpalaとKuduがApache Software財団に寄贈へ!

ついに素晴らしい2つのプロジェクト、ImpalaとKudoがApache Software Foundationに寄贈される方向で提案されました!

Cloudera Proposes to Donate Impala and Kudu to The Apache Software Foundation

https://www.cloudera.com/content/www/en-us/about-cloudera/press-center/press-releases/2015-11-16-cloudera-proposes-to-donate-impala-and-kudu-to-the-apache-software-foundation.html

https://www.cloudera.com/content/www/en-us/about-cloudera/press-center/press-releases/2015-11-16-cloudera-proposes-to-donate-impala-and-kudu-to-the-apache-software-foundation.html

Kuduを仮想化環境で動かしてみる

KuduにはQuickstartが用意されており、実機がなくてもVirtualBoxの仮想マシン上で動かしてみることができるようです。
Kudu Quickstart:http://getkudu.io/docs/quickstart.html

早速手元の環境で実行してみました。ダウンロード時間を含めて一通り実行しても30分もかからないので、興味のある方は是非。(ダウンロード時間次第)

(続きを読む)

Kuduリリース!

オープンソースの新しいストレージエンジン、Kudu

kudulogoついに本日アナウンスされた Kudu (クドゥ)、次世代ハードウェアにも対応するオープンソースのストレージエンジンです。まだベータ版ですが、3年もの開発期間を経てついに公開されました!

数日前にリークされた記事に「KuduはHDFSやHBaseを置き換えるものだ」と書かれていましたが、それは間違いです。詳細はFAQなどにも書かれていますが、HDFSとHBaseを補う新しいストレージエンジンです。

Kudu情報まとめページ

(続きを読む)