为啥我使用 scrapy 来抓取
http://www.fieldschina.com/zh/index.html ,他都会直接 302 转向
m.fieldschina.com? 我伪造了 User Agent ,不应该是通过 user Agent 来判断的,电脑上用 Chrome 打开正常,说明不是通过 ip 来判断的。
我使用 Chrome 隐私模式来访问,结果也正常,觉得应该不是 cookies 来判断。。
看一下 response header,用的是 php...
请教一下大家,我的思路有没问题? php 识别客户端正常使用的是什么方法 ?哪些变量?
非常感谢!
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
https://www.v2ex.com/t/292540
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.