マジセミドライブ

ウェビナー関連のニュースやITサービス&ツールの最新情報を随時配信します。

OSS情報

2020.01.01

【OSS情報アーカイブ】Filebeat

【OSS情報アーカイブ】Filebeat

※当記事に記載されている情報は、古くなっている場合があります。オフィシャルサイトで最新情報をご確認ください。

「Filebeat」とは

概要

Filebeat(ファイルビート)とは、Elastic Stackに属する「軽量ログデータ収集ツール」です。

サーバエージェントとしてインストールされたFilebeatは、指定したログファイルなどを監視し、ログイベントを収集して、インデックス作成のためにElasticsearchやLogstashに転送します。

Elastic Stackファミリー

Filebeatは、ログ分析ソリューション「Elastic Stack」の一部として構成されています。

そのため、以下の製品とシームレスに連携します。
・サーバ側データ処理パイプライン「Logstash」
・分析検索エンジン「Elasticsearch」
・データ視覚化ツール「Kibana」 など

Filebeatを「Elastic Stack」と連携させることで、あらゆるフォーマットでデータを取得し、リアルタイムで「検索」「分析」「可視化」できます。

→elastic.co →jp →elastic-stack

Filebeatの仕組み

Filebeatは基本的に以下の通りに動作します。
①サーバエージェントとしてFilebeatを起動
②Filebeat:ログデータ用に指定した場所を検索する1つ以上の入力を開始
③Filebeat:発見するログごとにハーベスタを開始
④各ハーベスタ:ログを読み取り、共通ライブラリ「libbeat」に送信
⑤libbeat:イベントを集約し「Filebeat用に構成した出力」に送信

→elastic.co →guide →beats →filebeat →how-filebeat-works

オフィシャルサイト情報

■オフィシャルサイト

→elastic.co →jp →beats →filebeat

■GitHub

→github.com →elastic/beats →tree →master →filebeat

■主要開発元

Filebeatは、Elasticが中心となり開発が進められています。

→elastic.co →jp →about

■ライセンス情報

Filebeatのライセンスは「Elastic License」です。

詳細について、こちらを参照ください。
→github.com →elastic/beats →licenses →ELASTIC-LICENSE.txt

■クイックインストール

→elastic.co →guide →beats →filebeat →filebeat-installation-configuration

■ダウンロード

→elastic.co →jp →downloads →beats →filebeat

同様製品

同様な機能を提供する製品として、次のようなものがあります。

オープンソース製品:「Logstash」「Fluentd」など。

バックプレッシャーセンシティブプロトコル

Filebeatは、データの突発的な増加を考慮して、LogstashやElasticsearchにデータを転送する際に、独自の「バックプレッシャーセンシティブプロトコル」を使用します。
・Logstashがデータ処理に対応できない状態を検知すると、読み込みのペースを緩める
・Logstashの高負荷状態が解消すると、読み込みスピードを戻して処理を続行

堅牢性

Filebeatは、読み込みや転送が中断された場合に、中断されたログ行を記録しています。

そのため、システムの復旧と同時に、中断した場所から処理を再開できます。

クラウドコンテナ対応

Filebeatは「Kubernetes」「Docker」「クラウド環境」にもデプロイできます。

すべてのログストリーム収集に加え、「ポッド」「コンテナ」「ノード」「仮想環境」「ホスト」「その他メタデータ」なども取得し、自動で関連付けします。

監視機能

「Elastic Stack」の監視機能を使用して、環境で実行されているFilebeatインスタンスの状態に関する洞察を得ることができます。
・内部収集:監視データを監視クラスタに直接送信
・Metricbeat収集:Filebeatインスタンスから監視データを収集し、監視クラスタに送信
・[非推奨]レガシーコレクション:監視データを本番クラスタに送信

参考サイト
→elastic.co →beats →filebeat
→elastic.co →guide →beats →filebeat
→github.com →elastic/beats →filebeat

この記事のタグ一覧

おすすめの記事

【AIツール実験室】チャットAI対抗「添削能力」選手権🏆

AIツール実験室

2023.12.27

【AIツール実験室】チャットAI対抗「添削能力」選手権🏆

各チャットAIの「添削能力」について比較確認をしています。 「ChatGPT4と同等の添削能力を発揮した無料チャットAI」にご注目ください。 また、 ChatGPTカスタマイズ機能「GPTs」を利用して作成した GPTs文章添削機能「添削師匠さん✍️」を紹介しています。 課金勢は試しに使ってみてください。

【IT用語解説】「 デジタルヒューマン 」とは😊

IT用語解説

2024.01.26

【IT用語解説】「 デジタルヒューマン 」とは😊

【IT用語解説】「 デジタルヒューマン 」として、「デジタルヒューマンとは何か?」「どのようにして作成できるのか?」「私たちの世界にどのような影響を与えているのか?」などについて、まとめています。

AIツール関連 記事リストポータル

AIツール

2023.10.05

AIツール関連 記事リストポータル

AI 関連の記事をまとめたポータルページです。