邓斯特

邓斯特是一个用于机器学习，分析和普通ETL数据管道的开源数据编制框架。与其他任务驱动的框架不同，Dagster意识到流经管道的数据，可以提供类型安全。通过生产的管道和资产的统一视图，Dagster可以安排和协调熊猫，火花，sql或python可以调用的其他任何内容。框架相对较新，我们建议您评估其数据流水线的功能。