カテゴリー別アーカイブ: BigData

CDH4 Hive 0.8.1 でCLOSE_WAITが溜まる問題

検索 CDH4もだいぶ安定稼働して死火山だわ~ って思ってたら、地味にマグマを蓄えていました。 解決してませんけど、斬新なCDH4ユーザのために記録しておきます。

CDH4 LogPath and LogLevel Configurations

検索 Hadoop実践シリーズの続きで、地味ながら重要な所をいきます。 CDH4+YARNの運用において、どのログを見れば良いのか、ログレベルはどのように設定するのか、というなんとも痒いところに手が届く孫の手編となります … 続きを読む

CDH4 Configurations with YARN, Capacity Scheduler and Hive

検索 前回の続きで、私がCDH4で利用している外道式設定ファイルの紹介です。 非常に手間暇かけて作成したものなので墓の下まで持って行きたいところですが、某所からの圧力と社会のために、恥ずかしながら放出したいと思います。

How to upgrade from CDH3 to CDH4 for Debian

検索 イベント2つを経て、何から書くか迷うところですが、先に @tagomoris との約束を果たすためにCDH3からCDH4への具体的なアップグレード手順を紹介します。 この約束を果たすと、@ryu_kobayashi … 続きを読む

Fluentd Meetup #2 発表資料

検索 このブログやTwitterをご縁に、Fluentd meetup in Japan #2 で登壇させていただくことになり、張り切って発表してきました。 発表資料はアニメーションを多様していたのでSlideShare … 続きを読む