ddui:用于数据科学管道可视化的Airflow插件 源码

Airflow的DataDriver插件 从熊猫的数据框到气流管道 为什么: 在机器学习项目中,本地交互式建模源代码和生产管道源代码之间存在差异,这是一个反复出现的问题。 由于我们经常在实验和生产之间进行切换,因此非常容易出错,因此非常耗时。 Datadriver项目旨在通过创建基于Pandas和sklearn的胶水代码进行建模,并基于Airflow进行自动化,调度以及监视和预测管道的监控来解决此问题。 插件说明 Datadriver UI(ddui)是我们开发来跟踪模型的Airflow插件。 与Datadriver的API(pyddapi)结合使用,它提供了DAG视图以跟踪机器学习工作流