タグ別アーカイブ: webhdfs

Fluentd+WebHDFSのAPPENDエラーをlog4jで除外

検索 前回に続いてFluendからWebHDFSに書き込んだ時の話ですが、今回はどちらかというと log4j の話になります。 log4j についてずっとド素人なままHadoopを使ってきたのですが、さすがに放っておけな … 続きを読む

Fluentd+WebHDFSの書き込み問題

検索 以前に晒したFluentdからWebHDFSに対してログを流し込むフローの部分を、 少しキツ目の環境にブっこんで運用したら色々問題点がでてきたので記しておきます。 どちらかというとFluentdというよりはHDFS … 続きを読む