<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<oembed>
  <author_name>kayactech</author_name>
  <author_url>https://blog.hatena.ne.jp/kayactech/</author_url>
  <blog_title>KAYAC Engineers' Blog</blog_title>
  <blog_url>https://techblog.kayac.com/</blog_url>
  <categories>
    <anon>aws</anon>
    <anon>fluentd</anon>
    <anon>norikra</anon>
    <anon>redshift</anon>
    <anon>slack</anon>
    <anon>zabbix</anon>
    <anon>lobi</anon>
    <anon>AdventCalendar2011</anon>
  </categories>
  <description>Lobiチームの長田です。 あらゆるWebサービスがそうであるように、Lobiでも日々大量のログが出力されています。 今回はこのログをどのように集約・解析しているかを紹介します。 TL;DR アクセスログ・アプリログなど、毎秒10000行以上のログが生成されている Fluentdを使用しログを集約 consul serviceを利用した集約サーバーの冗長化 ログ中のイベント検知・集約にはNorikraを使用 アクセスログの各種解析にはAmazon Redshiftを利用 ログの集約 ログ収集エージェント Lobiではログの集約にFluentdを利用しています。 Fluentd | Open S…</description>
  <height>190</height>
  <html>&lt;iframe src=&quot;https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftechblog.kayac.com%2Flobi-log-aggregation.html&quot; title=&quot;Lobiのログ集約・解析のはなし - KAYAC Engineers&amp;#39; Blog&quot; class=&quot;embed-card embed-blogcard&quot; scrolling=&quot;no&quot; frameborder=&quot;0&quot; style=&quot;display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;&quot;&gt;&lt;/iframe&gt;</html>
  <image_url>https://cdn-ak.f.st-hatena.com/images/fotolife/k/kayactech/20161026/20161026183217.png</image_url>
  <provider_name>Hatena Blog</provider_name>
  <provider_url>https://hatena.blog</provider_url>
  <published>2016-06-22 14:00:00</published>
  <title>Lobiのログ集約・解析のはなし</title>
  <type>rich</type>
  <url>https://techblog.kayac.com/lobi-log-aggregation.html</url>
  <version>1.0</version>
  <width>100%</width>
</oembed>
