未分類

未分類

Hadoop使いのためのRPMの便利な使い方5つ

Hadoopにどっぷりつかってもうすぐほぼ一年。去年の今頃はKVMやCluster、Linuxのパフォーマンスチューニングやらで休む暇もなかったわけですが、今年はより自転車操業的生活を送っています。- * - * - * -さて、Hadoo...
未分類

Hadoopエンジニアの記事(1)

Enterprisezineの記事めざせ!Hadoopエンジニア―開発者編―
未分類

Cloudera ManagerでHBaseのセットアップ

なんとEMR上でHBaseが利用できるようになったようです。素晴らしい。Hadoopの象本に対して馬本とも呼ばれている、Lars George著のHBaseバイブル的存在、米O'Reilly「HBase: The Definitive Gu...
未分類

Fedora17 on MacBook Air

Fedora17はEFIブートにNative対応したということなので、MacBook Air (2011)にインストールを行った。1) isoイメージのダウンロード2) ddを使ってUSBメモリに書き込み3) MBAにUSBメモリを装着4)...
未分類

Hadoop web UIの認証機能を試す

HadoopでNameNodeやJobTrackerのWebUIを利用するというのは一般的ですが、一般ユーザーには公開したくない場合もあります。設定方法についての質問があったので、CDH3の検証環境を作って試してみました。まずその前に:Ha...
未分類

lftp tips

lftpを使用してサイトにアクセスしようとしたところ、lftp -u kernel023 station1.example.comlftp kernel023@station1.example.com:~> lsls: Fatal erro...
未分類

hadoop 疑似分散モード (Pseudo distributed mode)のTips

某所で書いた記事の使い回しです:「疑似分散環境では、HDFSはいつフォーマットするの?」Hadoopをインストールした後、正しくインストールされているかどうかを確認するために、HDFSにアクセスすることが多いでしょう。通常 HDFSのフォー...
未分類

A Happy New Year 2012!

昨年は転機となった一年でした。今年は、業務では技術情報をわかりやすく提供することを目標とし、業務以外ではパッチをコミットしつつOSSに貢献したいと思っています。本年もよろしくお願いいたします。
未分類

RHEL6 beta2-Refresh Released

RHEL6 beta2-Refresh (like beta3? ;-)) has been released.Enjoy!
未分類

cluster suite on RHEL6 beta2 (2)

Fence agents are moved into fence-agents.rpm. (In RHEL5, they were part of cman package.)RHEL6 beta2RHEL5.5packagefence-...