纯内网环境架设 Python 源的方案求助

[sharoue]

单位的工作网络是专网，范围很大，有一群喜欢折腾 python 的菜逼。
想要在内网做一个 python 源，提供常见的库下载。就是把外网源选择性的下下来，放在内网做源。
目前尝试使用 bandersnatch，列表放上最近 1 年下载量前 5000 的包+最近一月下载量前 5000 的包，总共 5400 多个，再屏蔽掉 pypi 列出的 100 个占空间最大的包。抓下来这些包做成源，目测总大小 200G 左右都是可以接受的。
但是有好多问题，bandersnatch 不够好。
一是基本上只能从 pypi 官方源下载，速度太慢，经常断线，csdn 上那个改 master.py 的方法已经不好用了。
二是经常显示文件占用，mirror 好几次，也不知道到底扒下来的完整不完整。

不知道有没有已经在内网架设源，有更好的方案？比如可以从国内源拉镜像的工具，或者有人整理的近期的集合包可以直接拿来用的？

[Septembers]

用 Squid 做个代理和缓存说不定更好

[sharoue]

@Septembers 有看到一个类似的方案是 devpi。随便瞅了一眼，好像是用 devpi 可以架设一个代理，其他机器用 devpi 取代 pypi 去安装包，安装的包会自动缓存起来，时间长了就可以当作一个可靠的源了。问题是最初还是得是外网，而且还要有比较高手的团队养好一段时间才具有实用性。。。

[lyinfu]

try devpi:

https://mp.weixin.qq.com/s/_tTuRFGWbO_-Kc_gwB64Yg

[singerll]

rsync 直接同步清华或者中科大的 pypi 源

[azh7138m]

同楼上，之前同步过几个源，直接 rsync 就行了

[sharoue]

@singerll @azh7138m rsync 没用过，但是感觉不错。。。有筛选目录或者包的简便方法嘛？如果可以的话我可以连 debian 源都一起扒下来，毕竟我在内网还维护了一个 debian 源，现在觉得再用 apt-mirror 也不太方便。

[Septembers]

@sharoue 这个问题你可能需要跟 sysadmin 讨论下威胁模型及如何处理。
彻底隔离的话实际上没太大必要，认真处理威胁模型及风险可能能够更好的处理问题。

[azh7138m]

@sharoue https://www.thegeekstuff.com/2011/01/rsync-exclude-files-and-folders
随手一搜不都是的吗.....

[zhengnanlee]

求邀请码呀各位大佬

[zhengnanlee]

@zhengnanlee sry wrong topic...

[rexyan]

当时用 pypiserver 做了一个，专门用来放公司内部私有的包，当然公司的人的 pip 源也全改为这个地址，当内部 pypiserver 没有的时候就去豆瓣或者阿里拉下来

[zanzhz1101]

最简单的方法是。。。开个 nginx 反代，开启缓存