宅家 train 模型机器选择方案咨询

2021-01-31 21:58:34 +08:00
 aljun

楼主之前一直用的 G 家的 Colab 和自己的云主机 train 一些简单的模型以及 Kaggle 的比赛,一直想用自己机器去做一些事情,奈何现在主力机是一台老旧的 Mac (还未换 M1,不过也即将退休,换一台新的),现在想请教一下 v 站各位大佬们,如果只是 train 一些经典的模型或者做一些 Kaggle 或天池的比赛的话有什么推荐的方案呢?能想到的:

主要场景 是复现模型,以及跑一些公开数据的比赛 平时也是上班 996 党,主要是晚上回来和周末时跑着学习使用

想问问各位过来人意见以及踩过的坑

2292 次点击
所在节点    程序员
12 条回复
lazydog
2021-01-31 22:00:15 +08:00
知乎看稚辉君的方案啊!
aljun
2021-01-31 23:33:37 +08:00
@lazydog 貌似没找到。。。B 站也没找到
blues9
2021-01-31 23:50:30 +08:00
还是用各种云主机吧,买硬件的钱足够这个需求了
Puteulanus
2021-01-31 23:58:37 +08:00
云主机之前用过 Paperspace,感觉还行,现在好像向机器学习这方面特化了很多功能
https://www.paperspace.com/
lithiumii
2021-02-01 00:05:00 +08:00
现在显卡都不便宜,挖矿潮过去之后也许 12G 的 3060 会是(穷人)自己家里玩模型的合适选择。一定要现在买的话,不差钱直接 3090 吧
DoctorCat
2021-02-01 00:06:09 +08:00
tb 上找远程电脑出租,性能可以的。
szxczyc
2021-02-01 00:35:32 +08:00
配个 3080 的主机,放家里装 ubuntu 就可以了,不需要显示器。配置一下端口外网访问即可,想训练的时候 ssh 登录一下。训练的结果自动保存并推送进度,每隔一段时间用 sever 酱推送一下服务器情况。
M1 再劲爆也不能 train 一些大的模型呀,NLP 和 CV 的大 bs 就爆显存了,现在的模型越来越大了,一张 30 系显卡还是比较需要的,再说平常打打 LOL 他不香嘛?
M1 可以暂时不买,真不推荐拿来训练模型。这钱买个服务器靠谱!
PS:大显存多跑几组实验调参还是挺好用的。
Puteulanus
2021-02-01 03:48:20 +08:00
看了下,Paperspace 现在支持竞价实例了

https://imgur.com/M5rxZQd
dartabe
2021-02-01 04:02:09 +08:00
M1 貌似最近新出的 tensor flow 支持 CPU + GPU hybrid 方案据说性能还可以 你可以看看

还有亚马逊 AWS 也提供计算服务 不知道如何
liprais
2021-02-01 07:12:42 +08:00
@szxczyc 3080 那点显存也不够看的,3090 勉强够用
lazydog
2021-02-01 17:52:47 +08:00
@aljun 你搜这个: [保姆级教程] 个人深度学习工作站配置指南 稚晖
owenliang
2021-02-01 18:31:37 +08:00
买台电脑就行吧,啥数据规模还需要考虑这么多

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/750078

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX