爬虫问题,请教大神们

2017-07-17 09:43:59 +08:00
 qiaoyanbing
https://www.avnet.com/search/resources/store/715839035/productview/bySearchTerm/select?searchType=102&profileName=Avn_findProductsBySearchTermCatNav_Ajax&searchSource=Q&landingPage=true&storeId=715839035&catalogId=10001&langId=-1&currency=USD&orgEntityId=-2000&contractId=4000000000000071008&responseFormat=json&pageSize=20&pageNumber=1&_wcf.search.internal.boostquery=price_USD:{0.00001+TO+*}^499999.0+inStock:%22true%22^9000.0+topSellerFlag:%22Yes%22^0.085+newProductFlag:%22Yes%22^0.080+packageTypeCode:%22BKN%22^0.075&_wcf.search.internal.filterquery=-newProductFlag%3ANPI&q=RC522&intentSearchTerm=RC522&searchTerm=RC522&wt=json
这个网址为 JSON 数据为什么第一次访问跟在刷新一遍访问得到是不同的数据,我是需要从这里拿数据,但是一直出现问题网页
2014 次点击
所在节点    Python
3 条回复
2929899530pgy
2017-07-17 10:57:21 +08:00
没人吗
Le4fun
2017-07-17 11:05:14 +08:00
你是要爬什么 能说明下么
linuxchild
2017-07-17 15:50:59 +08:00
抓包看了一下,感觉应该是基于你电脑的信息加上时间戳通过个什么算法做了一个标记返回给你了这个变动的数据。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/375826

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX