 wangxq
|
7d2659f2bf
在配置文件中添加schema参数.
|
6 giorni fa |
|
wangxq
|
bbbd7d6206
手工调度基本修改完成，但幂等性设置有些问题
|
1 settimana fa |
|
wangxq
|
540676cf42
修改config.py，让prepare_day.py在作业中修改系统var变量。
|
1 settimana fa |
|
wangxq
|
5761322b50
抽取公共函数，修改scripts的路径
|
1 settimana fa |
|
wangxq
|
111c81a3fa
调通了python代码块的调用功能
|
3 settimane fa |
|
wangxq
|
c50bbf0d0d
load_file.py测试通过，准备修改多节点依赖。
|
3 settimane fa |
|
wangxq
|
1e4838a523
修改pipeline_prepare代码中的支持多个版本的json文件，还未删除它把执行计划写入数据库表的功能
|
1 mese fa |
|
wangxq
|
5e51972be7
单一文件的DAG我准备放弃了，目前unified三文件版本是可以正常工作的。
|
1 mese fa |
|
wangxq
|
fbebca0978
已经完成对定时订阅功能的公共函数的优化和测试
|
1 mese fa |
|
wangxq
|
a479a10557
修改了并行度控制，采用airflow参数控制
|
1 mese fa |
|
wangxq
|
721fbed27d
完成对utils.py/dag_data_resource.py/daily的优化，resource添加了并行度控制
|
1 mese fa |
|
wangxq
|
b18b6738cb
第一次提交,定时调度版本的resource,daily已经基本调试完成
|
1 mese fa |
