老板要去爬全国的律师 怎么办

[Archangell]

有没有大佬给指点一下 如何爬取全国的律师

[fatcheung]

好像是犯法的，想蹲号子吗兄嘚？

[Archangell]

@fatcheung 我不知道啊 刚刚有想要我去爬什么企业信息 说企查查天眼查什么的 都是网上公开的 这么跟他讲呢

[coderluan]

律师基本信息律协都有公开的，http://www.szlawyers.com/lawyer-list 唯一麻烦是每个省的律协网站都是独立的，爬虫不通用。企业信息

有问题能不能先搜索下...... 这么工作不怕冻死在“寒冬”吗.......

[Archangell]

@coderluan 感谢老铁了 老板丢了个 http://oa.acla.org.cn/login.jsp 这个网站 他就觉得全国所有的律师都在一个库里 还有那个企查查天眼查什么的 他想法就是 都在一个库里想办法把他给弄下来 不过我觉得我能力有限 弄不下来啊

[yjxlovejsn]

@fatcheung 为啥是犯法的啊，律师信息不都公开的嘛

[tt67wq]

我们老板还让我爬整个今日头条，我说啥了吗

[coderluan]

@Archangell 你老板这个确实犯法...... 但是天眼查那个能弄，每个分类爬一次就行了。

[Archangell]

@tt67wq 我跟你情况不太一样 你今日头条是直接展示的 这些是搜索查询的 没有说有个网站返回所有的律师信息给我 都是你去查律师执业证号 可是我这执业证号没地方来

[gamexg]

@yjxlovejsn #5 一般网站都有反爬措施，爬取时如果采取措施规避反爬虫限制，就会构成非法获取信息罪。
刑事判决书：
http://wenshu.court.gov.cn/content/content?DocID=cc5d28b2-ecca-45a9-9409-a85600ef4202

[coderluan]

PS：关于反爬这个，可以考虑用 Tampermonkey 脚本爬，虽然性能和效率不高吧，但是基本完美回避风险。

[Faratv2]

比较好奇爬下来做什么？做成天眼查那种？

从去年到今年，司法局和律协进行了好几次登记了，每次都在不同的信息管理系统。不过看律协最近一次通知的，好像都是那个“同道”公司开发、运营的。虽然在填的时候就预见到肯定会有信息泄露，但是没想到……

[Heavytiger]

@coderluan 基本完美回避风险，为啥？

[coderluan]

@Heavytiger 那个，我刚埋汰过你懒不搜索吧....... 因为 Tampermonkey 他是把页面加载到本地后，在本地浏览器上运行的，不访问对方服务器，对方反爬措施基本都用不上，顶多判定你访问页面太快。

[csx163]

现在看到律师们都在用 alphalawyer.cn ，希望对你有帮助吧

[117zly]

@csx163 收费律师操作系统