关于 token 穿透的问题 感觉 PHP 只能靠锁 Java 的话可以用 synchronized 来保证

2018-09-25 17:22:35 +08:00
 0576coder

最近项目上线 有点小流量 峰值差不多 600-800qps 吧 遇到了一个微信 accesstoken 穿透问题

问题描述

在并发高的时候 这时候缓存里面的 token 失效了 那么这时候我们会去请求微信的接口来刷这个 token 这时候因为有网络 io 然后各个请求得到的 accesstoken 互相覆盖 导致获取到的 token 不一定是最新有效的 token 所以就会陷入要不断去刷这个微信 token 的死循环当中 要是没及时发现 差不多要把微信 token 的当日获取次数用完

目前我的做法 业务代码带上个参数可以直接请求微信接口去刷新这个 token 然后还有务去刷新这个 token


目前暂时解决思路

用 redis 的 setnx 锁 只有竞争到锁的才会去请求 accesstoken 然后在存到缓存里之后 再把锁释放掉 当然我会设置这个锁的最长过期时间的

这样做了之后可以防止 token 穿透 但是比如 10 个并发请求 只有一个竞争到锁 其它的请求是不是要等待一会儿再去竞争锁 这样难道不会导致前端用户体验不好吗

还有搜了下 搜到了二级缓存 可以缓存两个 key 防止穿透 但是具体实现的话 是不是还是要用到 setnx


我搜了下 java 直接一个 synchronized 就能保证了- - 我是不是可以用 java 实现一个 token 中控

4070 次点击
所在节点    PHP
38 条回复
0576coder
2018-09-25 19:05:38 +08:00
@sampeng
你 redis 分布式锁用 setnx?
一般一个 token 中控台单机就够了 业务方自己缓存 过期了再来像中控台请求呀
sampeng
2018-09-25 19:24:04 +08:00
@0576coder 轻量业务 setnx 做锁蛮好使的。。。lz 这个需求怎么搞都没错倒是。。。是我肯定像楼上说的。专门起一个线程或者小的脚本,定时重新申请一下。。。

百万 pv。可能得两台机器吧。不然跪一台怎么搞?

setnx 很符合需求啊。。用 synchronized。。不是不可以。但从两台机器来看。互相并不知道锁的存在。。
sampeng
2018-09-25 19:25:10 +08:00
@0576coder 当然。一台机器,随便搞。。没啥区别
pynix
2018-09-25 19:30:34 +08:00
synchronized 只在进程内管用,,,,,多机玩完。。
0576coder
2018-09-25 19:38:24 +08:00
@sampeng
我现在跑 php-fpm 的在 3 台负载
然后有一台专门跑队列 定时任务的
xmh51
2018-09-25 19:42:46 +08:00
简单的做法 加 redis 分布式锁 java 实现是 redisson php 估计也有实现
xmh51
2018-09-25 19:43:46 +08:00
这个甚至用 mysql 也能支撑的啊。因为刷新 token 的节点穿透缓存后调用量并不高。
xuanbg
2018-09-25 21:21:02 +08:00
这个需求一个双检锁就好了,不需要太过麻烦。如果是分布式环境,就要用分布式锁,否则锁不住。
codespots
2018-09-25 23:42:14 +08:00
你这个情况,Java 的 synchronized 锁不适应的,synchronized 只是单机进程之间的。你现在的情况更需要的是分布式锁。
blackboom
2018-09-26 00:05:35 +08:00
这个地方不能单点,否则后果难以想象,分布式不但要考虑锁,还要考虑任务抢占和任务失败的情况,同时也要保证 RETRY 和强制刷新。

并发量小的情况下可以考虑 redis 和 mysql

并发量较大的时候 redis 或者 mysql 就会成为瓶颈,这个时候要考虑本地缓存。
ca1123
2018-09-26 01:07:55 +08:00
你弄个信号量来表示 token 操作过程的状态呗。这是经典的并发问题嘛。
shiny
2018-09-26 01:16:49 +08:00
#4 的定时刷新不就解决了,方案越复杂越要小心可靠度
GGGG430
2018-09-26 07:50:59 +08:00
楼主的 token 中控台接口还需加个参数,当调用方发现 token 失效时(也就是微信返回 40001 )你需要加上这个参数请求中控台直接刷新缓存
AngryPanda
2018-09-26 09:18:20 +08:00
让一个进程去做专门的事情。
spkinger
2018-09-26 09:43:02 +08:00
每个 token 都是有有效期的,可以在有效期到期前就去加锁并刷新,没获取到锁的依然去使用旧 token,这样可以保证无缝过度。如果能做成单独的服务更好,便于排查问题。
changepll
2018-09-26 10:04:29 +08:00
微信文档中也提及到这个 token 生成的方式
最佳实践是服务器开一个定时任务去生成. 业务只管使用, 不负责生成
yc8332
2018-09-26 16:41:56 +08:00
缓存还在 token 过期?不同环境请求重新生成 token 了吧。。。单起一个进程负责 token 的维护啊,定时维护就好了。cron 最简单。。加锁也可以。但是加锁你所有请求都要 hold,能 hold 住吗
0576coder
2018-09-27 13:43:59 +08:00
@changepll
是的 我想复杂了 其实我主要不想靠定时任务 想做个中控台 不过先这样业务方只管取 只有在定时任务里才会刷新这个 token 目前代码改了之后平稳运行了两天了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/492439

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX