Fluentd

Fluentdは、クロスプラットフォームでオープンソースのデータ収集ソフトウェアプロジェクトである。もともとはTreasure Data, Inc.で開発されていた。主にRubyで記述されている。
概要.
Fluentdは、半構造化または非構造化データセット用のビッグデータツールである。イベントログ、アプリケーションログ、clickstreamの分析に使用できる。SuonsyrjäとMikkonenは「Fluentdの基本的なアイデアは、さまざまなタイプのログ入力と出力を統合するレイヤーになることである」と述べている。Fluentdは、Linux、macOS、およびWindowsで使用できる。
歴史.
Fluentdは、マウンテンビューを拠点とするTreasure Data, Inc.のプロジェクトとして古橋貞之によって作成された。主にRubyで書かれており、そのソースコードは2011年10月にオープンソースソフトウェアとしてリリースされた。同社は2013年に500万ドルの資金提供を発表した。
2016年、Cloud Native Computing Foundation（CNCF）のプロジェクトに加わった。その後、2019年にはCNCFプロジェクト内のレベルのうちグラデュエーションに認定された。
ユーザー.
Fluentdは、Apache FlumeまたはScribe類似のソフトとして、2013年にAmazon Web Servicesによって推奨されたデータ収集ツールの1つとなった。Google Cloud PlatformのBigQueryは、デフォルトのリアルタイムデータ取り込みツールとしてFluentdを推奨し、デフォルトのロギングエージェントとしてgoogle-fluentdと呼ばれるGoogleのカスタマイズされたバージョンのFluentdを使用している。
Fluent Bit.
Fluent Bitは、Fluentd傘下のCNCFサブプロジェクトとして開発が行われている、ログの処理と転送を行うソフトウェアである。FluentdはCとRubyでRuby gemとして書かれているため、依存関係が多くメモリ使用量も大きかった。一方、Fluent BitはCのみで依存関係なしで作られているため、メモリ使用量が大幅に小さくなっており、コンテナ環境や組み込みLinuxでも利用しやすくなった。