请教一下，想找人爬金融管理总局 2020 起所有的处罚公开表，收费几何

[Endocryne]

https://www.cbirc.gov.cn/cn/view/pages/ItemList.html?itemPId=923&itemId=931&itemUrl=zhengwuxinxi/xingzhengchufa.html&itemName=%E8%A1%8C%E6%94%BF%E5%A4%84%E7%BD%9A

• 需求：想要获取 2020 年-2023 年金融监管总局（含地方分局）所有处罚公开表
• 问题 1：看了下格式好像不完全统一，大部分是表格，也有全文本，保存为什么格式比较好，会不会比较难搞？
• 问题 2: 合理收费大概是多少

[tool2d]

@lrabbit 不收费没风险，收了钱如果 OP 因为某些原因被抓，会顺着银行卡找过来。

[bluetree]

做好自己这边的风险隔离，之后就干呗，做好爬虫的保险装置，gov 流氓级别，祝你好运

[netnr]

大多数是第二条，没控制好频率，搞成压力测试

[thinkm]

坏消息：爬到自己了

[netnr]

博客园吐槽百度爬虫

https://mp.weixin.qq.com/s/UESyzaqT38dc2WWwQbDq2Q

[iorilu]

关键频率一定要低

你要知道, 政府网站大多都是 N 年前随便凑得系统

根本没任何高并发能力, 可能 10 个并发就能拖垮, 到时候你就麻烦了

[520discuz]

爬=攻击 等着那啥吧...

[potatowish]

很多事都是秋后算账，当时你觉得没事，事后揪住这个小辫子搞你一波

[xuhuanzy]

政府小水管要是崩了必抓人

[LudwigWS]

@lisxour 时间不值钱？写这种定制需求代码要稳定运行怎么也得一天吧，不是出于学习爬虫目的真懒得写，上班的很难为了几百块写这些代码

[zbwsmile]

可以加我微信聊

[tramm]

1 分钟请求一次应该不要紧

[nodejsexpress]

@lisxour 还是留给你做吧.

[lisxour]

@LudwigWS 可能水平问题吧，这样的网站，只抓数据的话，代码 + 调试，不超两小时。。。如果有明码 JSON ，不需要破解 JS 的情况下，这种网站我中途都不需要调试的，20-30 分钟写完代码，一次就过😂

[lisxour]

@LudwigWS 这类单通常不具备完善的合同制或者压根没合同，而且从我这么久的经验来说，绝大部分人（客户）都对需求说明比较弱，很多东西说不清楚，所以需求沟通时间成本和中间各种琐碎皮毛的修改才是占用时间的大头，不是代码时间，核心代码 1/3 时间，其他沟通+修改 2/3 时间，这都常有的事。屁大点的爬虫，你以沟通等的理由说加钱吧，客户也不会接受，不加钱吧，自己也不划算。

[xiamy1314]

为了几百块。。。属实没必要。。。

[zbwsmile]

OP 这么久也不回复也不留账号，估计自己搞了吧
@lisxour

[SixGodHave7]

@netnr 欲练爬虫，先学刑法

[zxCoder]

不懂就问。

那如果比如有一个人闲的蛋疼，自己手动访问一个一个下载下来，这合法吗哈哈哈

@lisxour

[realpg]

@netnr #25
不知道博客园是啥，但是名字语义分析，结合这篇文章，感觉这博客园的技术实力好弱鸡的感觉……
都不如我草台班子搞得巨型医院门户（以前带预约挂号 qps 起飞）