有一个任务管理系统,不同用户在管理系统上可以发布一些不同的耗时的脚本任务,当然除了发布任务之外用户还可以操作和查询其他信息
有一个集群可以接收任务,集群内的机器数量可以伸缩扩展。每一台机器都是通过多线程来并行执行任务,执行完任务把结果返回给任务管理系统
个人比较熟悉 java 和 python 两门语言,有没有值得参考的开源系统或者框架
给用户用的任务管理系统界面该怎么做技术选型,很久以前用的是 jquery 和 bootstrap 。很多年没写前端代码了,就目前前端技术来看选用什么前端框架和开源模板做管理系统比较合适(操作体验好,样式好看,容易上手,组件丰富)
优化整个集群执行任务的效率和数据一致性有没有什么好的经验可以分享一下
1
malusama 2023-03-29 11:03:31 +08:00 1
python 现在就有 dask 或者 ray.
|
2
burgleaf OP @malusama dask 和 ray 好像是大数据处理数据计算的,这里所指的是浏览器脚本任务,请教一下是否可以支持
|
3
w292614191 2023-03-29 11:31:33 +08:00
xxljob 不行吗
|