requests 或者 urllib2 能不能模拟手机端抓取网页

2015-02-18 06:34:27 +08:00
 wico77

RT。因为需要抓取手机页面的信息。不知道如何模拟手机端。谢谢

4579 次点击
所在节点    Python
12 条回复
ryd994
2015-02-18 06:45:23 +08:00
能,无非就是UA而已
fising
2015-02-18 08:07:41 +08:00
就是发送手机的request 可能不止ua
binbex
2015-02-18 09:49:01 +08:00
搜下fiddler.然后自己搞
killerv
2015-02-18 10:31:01 +08:00
应该是可以的吧,header里面的信息都可以伪造。
jianghu52
2015-02-18 11:00:08 +08:00
可以。我做过一个页面,就是专门判断手机还是PC端的,但是同事写了一个伪造的request,就把我的页面给欺骗了T_T
icedx
2015-02-18 12:24:38 +08:00
zwzmzd
2015-02-18 12:27:04 +08:00
@fising 手机request除了UA还有啥特别的吗?
icedx
2015-02-18 12:27:35 +08:00
9hills
2015-02-18 12:50:14 +08:00
@zwzmzd 如果不是专门防抓取移动网页,一般就只有ua判断。

如果做了防抓取,方法就多了,比如分辨率等……
clino
2015-02-18 12:55:58 +08:00
@9hills 分辨率也能配置吧?
9hills
2015-02-18 13:16:45 +08:00
@clino 当然能,所有的防抓取都有破解办法………只是简单一点就UA好了,不行再对症下药
taobeier
2015-02-21 13:03:33 +08:00
一般只是UA区别, 伪造头就好了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/171600

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX