有没有类似 yahoo pipes 的分布式任务管理调度后台?

2017-04-05 12:04:24 +08:00
 est
比如手上有一大堆处理 json 处理 xml 处理 rss 的过滤器,每个过滤器的作用是输入一些原始数据得到一个新的数据

现在我需要把上百个数据源和上千个过滤器,通过一个后台界面连接起来,形成一个 DAG 。这个连接过程希望是可以后台动态配置的,而不是需要改代码测试部署什么的。

有没有这样的开源系统?

看过 luigi airflow 感觉这个 DAG 都是代码指定的,并不能动态配置。
1733 次点击
所在节点    问与答
4 条回复
bbx
2017-04-05 12:36:11 +08:00
没有, use case 太窄
sammo
2017-04-05 18:30:01 +08:00
/t/345991 类似
mliilm
2017-04-08 01:14:57 +08:00
没实际用过,但是看介绍还不错

https://jenkins.io/projects/blueocean/
nickcheng
2017-05-16 12:33:24 +08:00

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/352612

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX