首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Distributions
Ubuntu
Fedora
CentOS
中文资源站
网易开源镜像站
workaholic
V2EX  ›  Linux

求推荐一种更加稳定架构来定时获取 api 即时数据

  •  
  •   workaholic · 12 天前 · 775 次点击

    目前开发需要积累行业数据,数据需要通过 api 每日定期获取,是一种即时数据,过期获取不到历史数据。 除了 linux 的 crond 来执行任务,能否推荐一种更加稳定架构,保证数据 365*24 及时获取不丢数据,谢谢!

    4 条回复    2020-08-02 21:28:13 +08:00
    ragnaroks
        1
    ragnaroks   12 天前   ❤️ 1
    水平拓展任务实例,用量去保证
    hangszhang
        2
    hangszhang   11 天前
    用开源的任务调度框架,那种支持任务失败自动转移的,部署多个执行节点,某个执行节点失败了转移到另外一个去执行
    jimrok
        3
    jimrok   11 天前
    java 跑 akka 的 actor,如果对 actor 模型很熟悉的话
    workaholic
        4
    workaholic   10 天前
    @hangszhang
    @jimrok
    感谢!
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   3216 人在线   最高记录 5168   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 21ms · UTC 10:42 · PVG 18:42 · LAX 03:42 · JFK 06:42
    ♥ Do have faith in what you're doing.