腾讯漫画爬虫........

[justtery]

上周周末写了一个腾讯漫画的爬虫....

现在已经有的功能:

1.查找漫画

2.查找出漫画的总章节数目

3.下载单话漫画

4.下载所有章节漫画(免费的括号笑)

目前存在的问题:

1.多线程下存在卡死或假死的状态(这块我是真的搞不懂了)

跪求大佬们教育,为什么会出现多线程下爬虫不爬了的情况啊 昨天我加了请求超时时间也还是会出现这种状况(昨天的修改没有上传 github)

代码地址:https://github.com/Fretice/Tencent_Cartoon_Download

注:请忽略 readme 文件中的内容,因为好多都写错了 /(ㄒoㄒ)/~~

[xuyl]

这种打包方式确实奇葩，你搞个 requirements.txt 不就行了？

[visylar]

pic_list_download 作为一个 shared variable 传入 13 个线程如果没有注意 atomic access ，应该会有很多 race condition ，所以会卡死或假死

[RqPS6rhmP3Nyn3Tm]

我当年也写过一个差不多的，不过你这打包方式真的奇特

[justtery]

@visylar 大佬能不能详细的给小弟讲一下

[MyFaith]

看了一眼 venv 目录，还是不 star 了。

[Ixizi]

hhhhhhhh 厉害了 我的哥