用来计算神经网络的组装机器的 1080ti 显卡用一阵就掉了

2017-12-18 09:00:20 +08:00
 zhiqiang

我们自己组装机器,插了 3 块 1080ti 显卡,用来计算深度神经网络,性能还不错,基本跟一台用 P100 的服务器计算性能差不多。

可是有个烦心事情,用一阵之后,显卡就会少,比如 nvidia-smi 只能看到两块显卡,另外一块显卡就不见了。重启机器,显卡会回来。

机器用的 i9 7900x CPU,128G 内存。操作系统是 ubuntu 16.04 。

有人碰到类似情况吗,怎么解决?

9400 次点击
所在节点    Ubuntu
33 条回复
focusheart
2017-12-18 12:13:10 +08:00
@zhiqiang 谢谢~~
turan12
2017-12-18 14:10:56 +08:00
@zhiqiang 其实就是 @z5864703 这个意思,看 12v 是多少 A 的,就可以算出功率。另外靠谱的 80plus 2000w 电源价格可不便宜,还不如分两个。
em84
2017-12-18 14:17:17 +08:00
这电脑用来刷贴吧肯定很爽系列
BadMan
2017-12-18 14:45:48 +08:00
我们实验室的服务器有时候也会这样,带了 4 块 Titan X,后来让学院管理员弄了一下就没出现过了
realpg
2017-12-18 14:51:52 +08:00
@zhiqiang
换个主板看看吧……
这主板压根就不是挖矿类场合设计的(计算基本就是跟挖矿同场景)
十有八九供电问题 这就是个超频 /游戏主板

做你这种需求的 弄专业点的挖矿板比较好 至少主板得带 至少一个大 4pin 甚至 8pin PCI-E 辅助供电 然后最好主电源用小点的就行,再弄个专门 12V 电源供显卡,我之前说的 30 元的艾默生 12V 65A 神电源就可以,自己动手简单改造一下即可
gpw1987
2017-12-18 15:55:51 +08:00
高级呀,神经网络
zhiqiang
2017-12-19 08:47:43 +08:00
@realpg 能推荐一个主板型号吗?神经网络 GPU 显存和数据传输率都很大,和挖矿还是有显著区别的。
zhiqiang
2017-12-19 08:49:02 +08:00
@turan12 振华应该没啥问题吧,这电源将近 3000 块钱。
turan12
2017-12-19 09:36:02 +08:00
@zhiqiang 一个字,米!:p
realpg
2017-12-19 11:51:53 +08:00
@zhiqiang #27
我基本不碰“高端”游戏主板,直接就能用的没推荐

我们这数据中心一堆计算类托管的业务,都不是这么玩的,都是 DIY,不放标准机柜

如果你 DIY 能力强就别装机箱了 类似挖矿那么的打个小架子 显卡固定架子上 然后用 PCI-E 延长线
找好 PCI-E 的电源针脚定义,直接从外部 12V 在排线对应针脚输入个 12V 电进去

建议买个我之前说的 30 元的艾默生神器电源,12V65A 的 改一下启动,给显卡辅助供电,再从主电源的大 4PIN 分出一个 12V 线 直接接到 pci-e 延长线的供电 算明白,一个 PCI-E 给 75W 供电,机械硬盘一个算 20W (考虑启动电流),CPU 按照 TDP 算,主板算 20W,主电源把这些加起来再加个 100 瓦余量就可以了,如果有额外的大散热风扇,直接算好风扇电流

然后三块显卡的 8pin 用 12V65A 那个神器带就够了

实际上,你的这个业务跟挖矿和计算区别不大,大量计算在显卡自己,cpu 调度明显比挖矿多一点,也不是助理,跟 cpu 的交换少得多,否则就不是用你这种单 CPU 的方案了

其实,最好还是用服务器挂多显卡,本身 SMP 系统支持的 PCI-E 通道数就多,然后用延长线弄出来挂在架子上,很多平台可以轻松 6 卡 PCI-E 8X 模式

这种超大功率的 PC 玩法,还是自己会设计会执行比较好
wecan
2017-12-19 14:34:04 +08:00
@Thiece pcie 供电和主板还有关系了?
Thiece
2017-12-19 14:48:55 +08:00
@wecan
@zhiqiang
PCIE 插槽会向其设备提供 75W 的供电,一般这个供电是由 24pin 提供,某些主板会提供额外的 PCIE 供电接口比如微星的 XPOWER 系列。显卡在使用过程中的供电有一部分也是由 PCIE 提供,具体多少看设计者了。
参考文章 http://3c.3dmgame.com/show-14-3850-1.html
Thiece
2017-12-19 14:51:32 +08:00
@zhiqiang 另外,你的电源 12V 输出是 133.3A ,除非出现品控问题,不然这块电源完全能带动整个平台。你可以留意一下散热问题。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/415564

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX