V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
BinYang
V2EX  ›  问与答

问一个缓存穿透的技术问题

  •  
  •   BinYang · 2021-03-08 15:27:07 +08:00 · 735 次点击
    这是一个创建于 444 天前的主题,其中的信息可能已经有所发展或是发生改变。

    背景:在被访问数据库中没有的数据时,此时会访问 db 。线上 90%的数据都是数据库没有的(业务场景限定)。此时为了解决缓存穿透的问题,引入了 redis 设置空值。此时导致的结果是(数据是 n x n )的。导致线上 redis 有 3 亿的空值 key 。

    解决思考:如果使用布隆过滤器,受限制于不能删除元素限制。不能使用,有什么更好的解决方案吗?

    9 条回复    2021-03-09 09:06:46 +08:00
    xiaoxinshiwo
        1
    xiaoxinshiwo  
       2021-03-08 17:03:49 +08:00
    把存在的数据的 key 全量存在 redis 中,命中再查数据库,再加载缓存?
    redtea
        2
    redtea  
       2021-03-08 17:10:09 +08:00
    redis 前面加一层,本地缓存。
    BinYang
        3
    BinYang  
    OP
       2021-03-08 17:39:06 +08:00
    @xiaoxinshiwo 这个方案,有考虑过。这么做的话,相当于强依赖 redis (这样子设计是不是有点蛋疼),那么此时。服务就很危险。redis 挂掉,就完全没有兜底了。
    BinYang
        4
    BinYang  
    OP
       2021-03-08 17:39:37 +08:00
    @redtea 这个怎么说?本地缓存,存什么呢?能具体点吗?
    xiaoxinshiwo
        5
    xiaoxinshiwo  
       2021-03-08 17:44:17 +08:00
    @BinYang #3 redis 就是做这个事情的,担心挂掉就做集群啊
    BinYang
        6
    BinYang  
    OP
       2021-03-08 18:02:38 +08:00
    @xiaoxinshiwo 这个解决方案,其实是 ok 的。除了,服务会强依赖缓存,这个目前来看。应该是最好的解决方式了。
    #_# 不过强依赖 redis 还是有点蛋疼。
    redtea
        7
    redtea  
       2021-03-08 18:03:23 +08:00
    @BinYang 把原来要存 redis 的数据先存本地缓存,没有查 redis,再没有查数据库。这样降低 redis 访问压力,减少网络带宽占用。
    zhuzhibin
        8
    zhuzhibin  
       2021-03-09 00:56:02 +08:00 via iPhone
    @redtea 但是不是压力吃到 IO 去了吗?
    xiaoxinshiwo
        9
    xiaoxinshiwo  
       2021-03-09 09:06:46 +08:00
    @BinYang #6 嗯,注意 redis 缓存不要被污染了,数据操作变更需要注意
    关于   ·   帮助文档   ·   API   ·   FAQ   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   1084 人在线   最高记录 5497   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 21:53 · PVG 05:53 · LAX 14:53 · JFK 17:53
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.