Apache NiFi

データの収集、転送、変換、フローの編成に使えるオープンソースのデータフロー処理プラットフォーム。

詳しい紹介

Apache NiFi はオープンソースのデータフロー処理・自動化プラットフォームで、データの収集、転送、変換、ルーティングのフローをビジュアルに構築できます。データ統合、センサーデータ、ログ処理、研究データのパイプラインに向いています。

適用場面:データフロー、データ収集、ETL、データ転送、フローの編成

注意:NiFi はデータエンジニアリング寄りのプラットフォームです。個人の軽いタスクには、まず Python スクリプトや Prefect を使えます。