kernel023

hdfs

bashでhadoopコマンドのタブ補完をする

Bash使いの皆さん。HDFSにアクセスの際、HDFS上のファイルをタブ補完したい!と思ったことはないでしょうか?ついついタブをクリックしてしまう、そんなbash遣い方には朗報かもしれません!?
Cloudera Manager

Cloudera ManagerでHDFSのフェデレーション

過去に「高可用性でフェデレーションなHDFS」というブログを書きました。一般的なHDFSの構成一般的にHadoopのクラスタでは、ひとつのネームノード(あるいは高可用性にする)がクラスタ全てのデータノードを管理します。※Hadoopのドキュ...
hadoop

Hadoop Operations 2nd edition ?

Hadoopオペレーションの2版も登場しそうとのこと。いつ発売されるんでしょうね。楽しみです。今年はHadoop関連本が数多くリリースされる一年になりそうです。レビュー頑張ります...
Cloudera Manager

Cloudera Managerのスクリーンショットいくつか

先日 HDFSのホットスワップの調査時に、Cloudera Manager 5.3でホスト関係のスクリーンショットを撮ってみました。ホスト関係のチャートのみです。チャートライブラリは運用するのに相当役立ちます。これで無料ですしね。。
hdfs

HDFSのHotSwapが動かない

昨日から試行錯誤しているHDFSのホットスワップ。動かないんだけどなんでだろう?
impala

Impala Cookbookを読んで

2014年のアドベントカレンダーのノルマも無事に終わったので、気楽に書きます(笑Impala Cookbook先日 Impala Cookbook というスライドが公開されました。これは非常に役立つスライドで、
CDH

CDH release history (English vers)

Because CDH 5.3.0 was released few days ago, I created the picture of CDH release history. (-> Japanese page)I recommend...
CDH

CDH release history (Japanese | 日本語 )

Hadoop関連(全部俺) Advent Calendar 2014: 25日目の記事ですカレンダー最終日&CDH5.3.0がリリースされたのを記念に、CDHのリリース履歴を1枚の図にまとめてみました。(かなり文字が小さいので、ダウンロード...
Cloudera Manager

Cloudera Manager 5.3にアップデート

Hadoop関連(全部俺) Advent Calendar 2014: 24日目の記事です#本日用に準備していたブログの仕込みが間に合わないため、明日にまわします昨日CDHを5.3.0にアップデートしていたのですが、Cloudera Man...
kafka

Apache Kafkaをセットアップ(解決)

#某24日目のブログ(になるかもしれず、ならないかもしれず)です。Cloudera 5.3.0 が公開されたのとタイミングを同じくして、Cloudera LaboでApache Kafka 0.8.2 のパッケージが公開されていました。前回...