Filebeatは、データの突発的な増加を考慮して、LogstashやElasticsearchにデータを転送する際に、独自の「バックプレッシャーセンシティブプロトコル」を使用します。
・Logstashがデータ処理に対応できない状態を検知すると、読み込みのペースを緩める
・Logstashの高負荷状態が解消すると、読み込みスピードを戻して処理を続行
Filebeatは、読み込みや転送が中断された場合に、中断されたログ行を記録しています。
そのため、システムの復旧と同時に、中断した場所から処理を再開できます。
Filebeatは「Kubernetes」「Docker」「クラウド環境」にもデプロイできます。
すべてのログストリーム収集に加え、「ポッド」「コンテナ」「ノード」「仮想環境」「ホスト」「その他メタデータ」なども取得し、自動で関連付けします。
「Elastic Stack」の監視機能を使用して、環境で実行されているFilebeatインスタンスの状態に関する洞察を得ることができます。
・内部収集:監視データを監視クラスタに直接送信
・Metricbeat収集:Filebeatインスタンスから監視データを収集し、監視クラスタに送信
・[非推奨]レガシーコレクション:監視データを本番クラスタに送信
参考サイト
→elastic.co →beats →filebeat
→elastic.co →guide →beats →filebeat
→github.com →elastic/beats →filebeat
OSS×Cloud ACCESS RANKING