CDH6 Cloudera Enterprise 6 beta で Erasure Coding を試してみる
Hadoop 3.0 で導入された HDFS Erasure Coding を Cloudera Enterprise 6.0 beta の環境で試してみました。
HDFSのErasure Coding は、HDFSのブロックの複製とは...
CDH6 CDH6 Cloudera Enterprise 6 (beta) インストール
Cloudera Enteprise 6 beta
先月検証したまま放置していましたが、Cloudera Enteprise 6 public beta をインストールしたのでメモ書きです。
Cloudera Enterprise 6 のペ...
CDH6 YARNでGPU
メモ
YARNのGPU対応についてのドキュメント
Using GPU On YARN
CDH6 Cloudera Enterprise 6 Beta リリース！
Hadoop 3系がリリースされ、CDH5のリリースから4年が経過した今、Cloudera Enterprise 6のβ版が公開されたようです。「CDH6」という名称の方がわかりやすいかもしれませんね。
Cloudera Etnerpris...
Kudu Apache Spark 2.xでKuduを利用する
以前のブログ（Apache SparkでApache Kuduを利用する）の Spark2.x版です。前回のブログからあまり変わっていませんが、前回のブログの手順はSpark2.xで動作しなかったという話を聞いたのでアップデートしておきます...
hadoop Apache Hadoop 3.0.0 リリース
(2017/12/15更新）
本日 Apache Hadoop v3.0.0 が GA になりました！
ハイライトは下記の通り（上記サイトから抜粋して翻訳）
HDFS のイレイジャーコーディング — データの耐久性を向上させながらH...
cloudera ビッグデータ用のデータ管理ツール
先日開催された Cloudera World Tokyo 2017 にて、「Clouderaが提供するエンタープライズ向け運用、データ管理ツールの最新情報の使い方」というセッションで講演させていただきました。セッション申し込みが200名超（...
Uncategorized Apache Impala
ついにImpalaがApacheのトッププロジェクトになりました！おめでとうございます！
The Apache Software Foundation Announces Apache® Impala™ as a Top-Le...
cloudera Cloudera World Tokyo 2017 開催
2017/11/07に、秋恒例のイベント「Cloudera World Tokyo 2017」が開催されます。
今年は、”ビジネスを変える「データの力」”をテーマに、技術からビジネスまで、例年にも増して多種多様なセッションが用意されている...
hadoop HDFSの新しい機能３つ
HDFSは分散ファイルシステムとして確固たる地位を築きましたが、NFSのサポートやスナップショットなど、多くの機能が追加されています。
その中で、今後 Hadoop 3 で重要となる「HDFSのイレイジャーコーディング」を含めたCloude...