Prefect

Python のデータパイプライン、タスクのスケジューリング、自動化された解析に使えるオープンソースのデータワークフローツール。

詳しい紹介

Prefect はオープンソースの Python ワークフロー・オーケストレーションツールで、データパイプラインや自動化タスクの構築、実行、監視に使えます。Python によるデータ分析、研究のバッチ処理、定期実行タスク、軽量なデータエンジニアリングのフローに向いています。

適用場面:Python のワークフロー、データパイプライン、自動化された解析、タスクのスケジューリング、研究のバッチ処理

注意:複雑な企業レベルのスケジューリングでは、Airflow と比較して選べます。