HDFSのワーカーのタイムアウト時間 10分30秒

備忘録がてら貼っておく。

NameNodeとDataNodeのタイムアウト時間

HDFSでは、DataNodeが定期的にNameNodeにハートビート通信を行なっています。DataNodeからのハートビートが一定時間途絶えると、NameNodeは当該ノードを「Dead」と認識します。

タイムアウト時間はデフォルトでは10分30秒となっており、次のプロパティを変更することで調整が可能です。

(2 * dfs.namenode.heartbeat.recheck-interval) + (10 * dfs.heartbeat.interval

したがって、

となります。

次のように、これらの項目は標準でHDFSの設定画面に表示されません。

変更が必要な場合、Cloudera Manager の設定から safety valve (安全バルブ) でプロパティと値を設定してください。