mlopsgithub

dagster — An orchestration platform for the development, production, and observation of data assets.

dagsterは、データアセットの開発、生産、観察に使用されるオーケストレーションプラットフォームです。

用途
データアセットのオーケストレーションを提供する
難易度の目安
Easy
実装コストの目安
Medium

概要

An orchestration platform for the development, production, and observation of data assets.

参考リンク

リンク先のライセンス・再現性・データ条件をご確認ください。自動分類や実装の目安は保証ではありません。

実装を始めるプロンプト

参考リンクを確認したうえで、次の内容をコピーして利用できます。

# 論文・記事
dagster — An orchestration platform for the development, production, and observation of data assets.

# 概要
dagsterは、データアセットの開発、生産、観察に使用されるオーケストレーションプラットフォームです。

# 原典
https://github.com/dagster-io/dagster

上記の手法を実装してください。実行前に依存関係とライセンスを確認してください。

関連する記事

github実装リンクあり

kedro — Kedro is a toolbox for production-ready data science. It uses software engineering best practices to help you create data engineering and data science pipelines that are reproducible, maintainable, and modular.

プロダクションリードデータサイエンスを実現するためのツールボックスです。データエンジニアリングとデータサイエンスパイプラインを再現性、メンテナンス性、モジュール性を持つものにすることができます。

プロダクションリードデータサイエンスのツールボックス