innossh https://blog.hatena.ne.jp/innossh/ Usual Software Engineer https://innossh.hatenablog.com/ Fluentd multiprocess td-agent Docker ログ -> fluentd -> fluentd -> ストレージ のような流れで fluentd を酷使していると、1コアしか使えない fluentd が悲鳴を上げて そこがボトルネックとなってスループットが上がらない問題にぶつかります。 そこで使えるのが fluent-plugin-multiprocess というプラグインです。 他の input plugin と同様に source を定義して複数の fluentd の子プロセスを呼び出すことでマルチコアの利用が可能になります。 docker-fluentd-multiprocess/fluent.conf at master · in… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Finnossh.hatenablog.com%2Fentry%2F2017%2F05%2F31%2F011834" title="fluentdの負荷分散のためにmulti processを有効にする - Usual Software Engineer" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2017-05-31 01:18:34 rich https://innossh.hatenablog.com/entry/2017/05/31/011834 1.0 100%