[不懂就问] 为什么 Shopify 这个站的统计可以忽略来自 Postman 的请求

2021-06-24 09:18:06 +08:00
 wuxi889

在一家外贸企业上班,碰到一个不懂的问题就是为什么 Shopify 这个站的统计可以忽略来自 Postman爬虫 的请求,他不是通过 UA 来判断的,那么他是通过什么原理来统计访客的呢?

1910 次点击
所在节点    问与答
8 条回复
zenxds
2021-06-24 09:22:57 +08:00
postman 的请求会在 HTTP 头里加一个 Postman-Token,可以在 postman 里面点 code,里面会有各种代码示例里可以看到
wuxi889
2021-06-24 09:41:17 +08:00
@zenxds 那爬虫的请求如何屏蔽呢,就是非搜索引擎的那种爬虫
wuxi889
2021-06-24 09:41:40 +08:00
@zenxds 不是屏蔽爬虫访问,而是去记录爬虫的信息
LxExExl
2021-06-24 10:01:44 +08:00
所以楼主是要刷访问嘛
pkoukk
2021-06-24 10:19:27 +08:00
selenium 这样的也能屏蔽?
如果不能,说明就是前端加了什么 token 。
如果能,那就超出我的知识范围了
ferrum
2021-06-24 10:21:38 +08:00
看它怎么统计的,有可能是用 JavaScript 访问 API 进行统计的,这样不渲染页面的访问记录就不算。
zenxds
2021-06-24 11:54:13 +08:00
@wuxi889 规范一点的爬虫框架也会在请求头里加上特殊的标识的
wuxi889
2021-06-24 13:37:59 +08:00
@LxExExl 只是想弄明白他的实现,主要是交流,你懂的

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/785452

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX