头条新闻评论爬虫，返回信息为空的奇怪现象

[capljf]

我在爬头条新闻评论时遇到一个奇怪的问题，用 postman 模拟请求可以正常获得数据， 但用 python requests 模块写的请求获取到的数据总是空的，有返回信息，但里面没有有用的价值。 接口类似于这种： https://www.toutiao.com/api/comment/list/?group_id=6533396129860551182&item_id=6533396129860551182

postman 返回数据： { message: "success", data: { has_more: true, total: 65, comments: [ { text: "充电一回，能用半年，我们就买。", digg_count: 293, reply_data: { reply_list: [ ] }, ....省略很多}

python 程序返回数据： {"message": "success", "data": { "has_more": false, "total": 0, "comments": []}}

[Telegram]

抓 postman 和 py 请求的数据包，比较有啥不同，然后慢慢改

[goofool]

UA 问题吧

[limerence12138]

估计没带 UA

[zw]

如果 UA 是 PC 浏览器，如果没有登录，头条是限制评论显示的，不仅禁评，还不给你看，逼用户装手机 app。。。

[netChen]

检查一下 cookies 和 user-agent，使用代理 IP，抓取信息的时候一定要带上