
dagster
ワークフロー自動化データ資産指向のオーケストレーションツール
Dagsterは、「データ資産(アセット)」を中心に据えた設計が特徴のオープンソースのデータオーケストレーションプラットフォームです。タスクの実行順序ではなく、テーブルやモデルといった成果物を宣言的に定義することで、データの依存関係やリネージ(系譜)が自動的に可視化され、どのデータがいつ・どう作られたかを追跡しやすくなります。型チェックやテスト容易性などソフトウェアエンジニアリングの実践をデータパイプラインに持ち込んでおり、dbtとの統合も強力です。ローカル開発体験の良さにも定評があります。データ基盤の品質と可観測性を重視するデータエンジニアリングチームや、dbtを中核としたモダンデータスタックを運用する企業に向いています。Apache-2.0ライセンスで、マネージド版のDagster+もあります。
関連トピック
analyticsdagsterdata-engineeringdata-integrationdata-orchestratordata-pipelinesdata-scienceetlmetadatamlopsorchestrationpythonschedulerworkflowworkflow-automation
コメント(0)
コメントするにはログインしてください。
同じカテゴリのOSS

n8n
ノードベースで業務を自動化するZapier代替の筆頭
ワークフロー自動化OtherTypeScript

huginn
自分専用のエージェントを作る老舗自動化ツール
ワークフロー自動化MITRuby

airflow
データパイプラインの定番ワークフローエンジン
ワークフロー自動化Apache-2.0Python

kestra
宣言型のイベント駆動オーケストレーション基盤
ワークフロー自動化Apache-2.0Java

node-red
IoTでも定番のフローベースプログラミングツール
ワークフロー自動化Apache-2.0JavaScript

activepieces
オープンソースのノーコード自動化(Zapier代替)
ワークフロー自動化OtherTypeScript