言語を選択

ホームページ

...

開発ツール

Apache Airflow

Apache Airflow の代替手段

Apache Airflow の代わりとなる 4 個の無料および有料のリストをまとめました。主な競合相手はAWS Glue、 StackStormです。これらに加えて、ユーザーは Apache Airflow と Apache Oozie、 Zenaton の間の比較も行います。また、他の同様のオプションもここで確認できます: 開発ツール。

AWS Glue

Subscription Free

AWS Glueは、多様なソースからのデータの容易な発見、準備、統合を可能にすることで、ETLプロセスを簡素化するサーバーレスデータ統合サービスです。イベント駆動型ETL、データカタログ、ノーコードETLジョブ、データ品質管理をサポートしており、アナリティクスやMLプロジェクトに最適です。

StackStorm

Free Open Source

StackStorm is a powerful open-source automation platform that wires together all of your apps...

Apache Oozie

Apache Oozie Workflow Scheduler for Hadoop

Zenaton

-10

サードパーティのサービスを監視とアプリケーションに統合するための開発者ツールセット...

Apache Airflow

Free

Open Source

ウェブサイトを訪問する

Twitter

Free

Open Source

ウェブサイトを訪問する

Twitter

Airflowは、ワークフローをプログラムで作成、スケジュール、および監視するためのプラットフォームです

Apache Airflow プラットフォーム

Linux

Apache Airflow ビデオとスクリーンショット

Apache Airflow 概要

Airflowは、データパイプラインをプログラムで作成、スケジュール、および監視するためのプラットフォームです。

Airflowを使用して、ワークフローをタスクの有向非循環グラフ（DAG）として作成します。 Airflowスケジューラーは、指定された依存関係に従ってワーカーの配列でタスクを実行します。豊富なコマンドラインユーティリティにより、DAGで複雑な手術を簡単に実行できます。豊富なユーザーインターフェイスにより、運用中のパイプラインの視覚化、進行状況の監視、必要な場合の問題のトラブルシューティングが簡単になります。

原則

動的：エアフローパイプラインはコード（Python）として構成され、動的なパイプラインの生成を可能にします。これにより、パイプラインを動的にインスタンス化するコードを作成できます。
拡張可能：独自の演算子、エグゼキュータを簡単に定義し、ライブラリを拡張して、環境に適した抽象化レベルに適合させます。
エレガント：エアフローパイプラインは無駄がなく明確です。スクリプトのパラメーター化は、強力なJinjaテンプレートエンジンを使用してAirflowのコアに組み込まれています。
スケーラブル：Airflowはモジュラーアーキテクチャを備えており、メッセージキューを使用して、任意の数のワーカーを調整します。気流は無限に拡大する準備ができています。