AI流水线

Dagster

dagster.io

Dagster是面向云原生环境的数据基础设施工具，核心定位为数据和AI管道构建、调度与监控平台，支持开发人员和数据团队声明式定义数据工作流，提供可观测性与调试能力。核心功能包括声明式管道定义、原生集成云原生服务、端到端可观测监控、增量计算支持、灵活部署选项。目标用户覆盖数据工程师、AI研发团队、DevOps工程师、数据分析师、产品开发团队等，适合用于构建机器学习训练流水线、ETL数据处理任务、定时数据同步作业、多步骤AI推理工作流等开发与生产场景。