 wangxq
|
c50bbf0d0d
load_file.py测试通过，准备修改多节点依赖。
|
3 viikkoa sitten |
|
wangxq
|
25d64887fd
增加了对load_file.py的支持
|
3 viikkoa sitten |
|
wangxq
|
d0517d7a58
添加load_file.py，准备修改DAG，增加对csv的支持
|
3 viikkoa sitten |
|
wangxq
|
832dbc08c2
修正了手工传参的大小写问题
|
1 kuukausi sitten |
|
wangxq
|
c0f8b12ad4
pipeline版本的prepare/data代码修改了手工传参的日志
|
1 kuukausi sitten |
|
wangxq
|
e3481c69da
pipeline 版本添加了手工传参的功能，修改了部分scripts.
|
1 kuukausi sitten |
|
wangxq
|
c7c9aa395e
prepare和data已经可以正常工作，后面计划重新添加一个summary的DAG.
|
1 kuukausi sitten |
|
wangxq
|
0c1735befc
准备修改airflow_exec_plan表，并测试时间戳的生成
|
1 kuukausi sitten |
|
wangxq
|
22cb341bd1
准备修改两个文件中的时区，我发现ds和exection_time都是UTC时区的
|
1 kuukausi sitten |
|
wangxq
|
935efc4d4b
pipeline_prepare 同时把plan写成json文件和数据库表
|
1 kuukausi sitten |
|
wangxq
|
2e8886e1b7
从pipeline_prepare删除了与airflow_dag_schedule相关的操作
|
1 kuukausi sitten |
|
wangxq
|
1e4838a523
修改pipeline_prepare代码中的支持多个版本的json文件，还未删除它把执行计划写入数据库表的功能
|
1 kuukausi sitten |
|
wangxq
|
e8a9e4711f
dag_dataops_pipeline_*_scheduler.py 的两个文件基本可以正常工作，data_scheduler.py的summary功能还有些问题。
|
1 kuukausi sitten |
