itunes 大量采集， 非常稳定， 经常 403, 有没有什么好的解决方案. 求~~

2013-10-28 17:09:25 +08:00
 hpze2000
3975 次点击
所在节点    程序员
12 条回复
hpze2000
2013-10-28 17:17:18 +08:00
错了， 非常不稳定。。。。
Showfom
2013-10-28 17:21:35 +08:00
挂上大量代理IP
hpze2000
2013-10-28 17:47:41 +08:00
额， 代理IP 这么搞？？？
@Showfom
Livid
2013-10-28 18:14:10 +08:00
x forwarded for
hpze2000
2013-10-29 08:44:56 +08:00
@Livid 这是什么意思？
hardway
2013-10-29 09:20:38 +08:00
x forwarded for 自己冒充代理
或者使用tor，不停更换IP
fanwei
2013-10-29 10:29:46 +08:00
如果服务器获取的client ip，是不是就没办法了？
fucker
2013-10-29 10:47:21 +08:00
@fanwei 是的，X-FORWARDED-FOR就没用了，这样就只能用代理或者vpn。
eickegao
2013-10-31 08:59:19 +08:00
apple有一套API可以提供itunes的信息的。
eickegao
2013-10-31 09:01:31 +08:00
可以看一下http://www.apple.com/itunes/affiliates/resources/documentation/itunes-store-web-service-search-api.html
tcsky
2013-11-05 20:19:03 +08:00
请求的时候用IP加header请求,将流量分发到CDN不同服务器上去~ 再加上伪造的IP头(这个不知道有没有用,我想像的是防封), 我采12306就这么干的, 能稳定在每秒10个http请求不被封~ 我这边连续跑了一个学期，已经几百万次请求了都没事~
tcsky
2013-11-05 20:20:32 +08:00
额 一个星期~ 一个学期吓死人~~

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/87184

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX