requests 或者 urllib2 能不能模拟手机端抓取网页

2015 年 2 月 18 日
 wico77

RT。因为需要抓取手机页面的信息。不知道如何模拟手机端。谢谢

5105 次点击
所在节点    Python
12 条回复
ryd994
2015 年 2 月 18 日
能,无非就是UA而已
fising
2015 年 2 月 18 日
就是发送手机的request 可能不止ua
binbex
2015 年 2 月 18 日
搜下fiddler.然后自己搞
killerv
2015 年 2 月 18 日
应该是可以的吧,header里面的信息都可以伪造。
jianghu52
2015 年 2 月 18 日
可以。我做过一个页面,就是专门判断手机还是PC端的,但是同事写了一个伪造的request,就把我的页面给欺骗了T_T
icedx
2015 年 2 月 18 日
zwzmzd
2015 年 2 月 18 日
@fising 手机request除了UA还有啥特别的吗?
icedx
2015 年 2 月 18 日
9hills
2015 年 2 月 18 日
@zwzmzd 如果不是专门防抓取移动网页,一般就只有ua判断。

如果做了防抓取,方法就多了,比如分辨率等……
clino
2015 年 2 月 18 日
@9hills 分辨率也能配置吧?
9hills
2015 年 2 月 18 日
@clino 当然能,所有的防抓取都有破解办法………只是简单一点就UA好了,不行再对症下药
taobeier
2015 年 2 月 21 日
一般只是UA区别, 伪造头就好了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/171600

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX