首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

可能是深度学习+拼多多的第一个受害者

  •  8
     
  •   alexapollo · 2018-09-06 19:06:16 +08:00 · 12302 次点击
    这是一个创建于 455 天前的主题,其中的信息可能已经有所发展或是发生改变。

    现场: https://github.com/fastai/fastai/issues/751

    今天装了 fastai,发现它的模型(哪怕再简单),都会导致系统死机和重启。

    • DEBUG 了半天,排查了所有的相关环境( CUDA/cuDNN/Anaconda/PyTorch ),都没有发现问题
    • 用 tensorflow / pytorch 单独跑简单的例子也不会有问题
    • 但是一用 fastai,系统就会马上死机,百思不得其解。于是迫不得已发了个 issue

    最终,发现这个问题竟然是因为公司的采购喜欢用拼多多造成的。

    68 回复  |  直到 2018-09-08 16:18:19 +08:00
        1
    jadec0der   2018-09-06 19:10:25 +08:00   ♥ 6
    Issue 应该这样写:Nasdaq: PDD
        2
    wevsty   2018-09-06 19:14:00 +08:00   ♥ 2
    原谅我笑出声。。。

    顺便说一句,用垃圾电源小心硬盘挂,不知道这公司的数据有没有备份又价值多少。
        3
    ballshapesdsd   2018-09-06 19:15:57 +08:00
    哈哈
        4
    alexapollo   2018-09-06 19:21:12 +08:00
    @jadec0der 感谢指正!
        5
    bearqq   2018-09-06 19:25:13 +08:00
    原来是电源辣鸡,哈哈哈
    不买酷妈 /振华,好歹也买个航嘉 /长城啥的啊。。
    只能说你幸运主板显卡硬盘什么的没坏
        6
    alexapollo   2018-09-06 19:26:28 +08:00
    更新了细节,后面让公司统一换电源
        7
    Pythondr   2018-09-06 19:26:59 +08:00
    所以说到底买了什么牌子的电源
        8
    againstodds   2018-09-06 19:36:21 +08:00   ♥ 1
    笑出了声。
    兄弟,帮你发了一条 Hacker News,如果觉得不妥的话,告诉我我会去删掉。

    https://news.ycombinator.com/item?id=17925471
        9
    SingeeKing   2018-09-06 19:38:08 +08:00
    原谅我笑出声……

    如果这种造成了严重后果,是否可以去起诉商家甚至拼多多。。
        10
    mrchi   2018-09-06 19:39:52 +08:00
    强势围观
        11
    huhuhushan   2018-09-06 19:41:14 +08:00 via iPhone
    真是笑死了
        12
    bxb100   2018-09-06 20:20:15 +08:00
    笑死我了
        13
    TustMan   2018-09-06 20:26:47 +08:00
    拼多多被黑的最高级的一次了
        14
    alexapollo   2018-09-06 20:47:47 +08:00
    @againstodds 可以的,最好带上补充的 debug 细节,会清楚一点
        15
    airyland   2018-09-06 21:09:33 +08:00
    看了 issue 我的关注点是有多个英文错误。。
        16
    nicevar   2018-09-06 21:18:11 +08:00
    哈哈,这次不是保安夜晚起来踩电源线了
        17
    Applenice   2018-09-06 21:21:09 +08:00
    哈哈哈哈嗝
        18
    AzadCypress   2018-09-06 21:22:25 +08:00 via Android
    笑死了
        19
    hanru   2018-09-06 21:28:26 +08:00 via Android
    码农思维,碰到问题找代码 bug。这种系统死机重启,大概率是硬件问题啊。
        20
    ex2vkf   2018-09-06 21:28:58 +08:00   ♥ 1
    如果在拼多多买显卡,是不是真的会买到煤气灶啊
        21
    May725   2018-09-06 21:32:26 +08:00
    是如何发现原因的
        22
    ex2vkf   2018-09-06 21:35:25 +08:00
    @May725 nvidia-smi 一看就知道了吧。。。。
        23
    iVeego   2018-09-06 21:36:08 +08:00 via Android
    The power supply is buy from PinDuoDuo (Nasdaq: PDD), it says it has 550W, but it may be only support ~200W, I doubt it's a fake.

    哈哈哈哈。
        24
    youngsterxyf   2018-09-06 21:36:33 +08:00
    @alexapollo 知道的话可以发一下拼多多上这个电源的链接或者截图吗?
        25
    icylogic   2018-09-06 21:44:31 +08:00 via iPhone
    的确有训练的时候发现供电不足的情况,现在好像是单卡的 750w,双卡的 1000w。而且公司怎么能允许从拼多多正式采购啊,拼多多有正规发票吗。。
        26
    loryyang   2018-09-06 21:50:57 +08:00
    老哥英语水平需要再提升下呀。不过这个坑是有点奇葩
        27
    lunzima   2018-09-06 21:55:40 +08:00
    工作站居然不用台达电源
        28
    zizifu   2018-09-06 22:00:28 +08:00 via Android
    原谅我,我也笑了
        29
    sobigfish   2018-09-06 22:01:56 +08:00   ♥ 1
    所以没人关心采购到底中饱私囊了多少?😂
        30
    Lanceliel   2018-09-06 22:10:22 +08:00 via Android   ♥ 1
    @lunzima 在 V2 提电源居然也可以召唤出轮子妈……惊了。
        31
    Les1ie   2018-09-06 22:11:00 +08:00
    Nasdaq: PDD $19.03 GMT-4 10:09 静静等今日价格变化

    https://i.loli.net/2018/09/06/5b91350d0ae72.png
        33
    chanssl   2018-09-06 22:18:27 +08:00
    你们公司采购这么为公司省钱啊
        34
    tanranran   2018-09-06 22:19:01 +08:00
    After debugging for around 8 hours, I found the error:

    TensorFlow and PyTorch's examples use only ~100W power.
    Fastai's example (lesson1) use 80~300W power (not stable, changing fast).
    While monitoring nvidia-smi, it seems like when power usage reach 200W, the system halted and reboot.
    The power supply is buy from PinDuoDuo (Nasdaq: PDD), it says it has 550W, but it may be only support ~200W, I doubt it's a fake.
    After changing this power supply, the issue solved.


    笑死了
        35
    lzjqsdd   2018-09-06 22:50:47 +08:00 via Android
    忍不住笑
        36
    livc   2018-09-06 23:17:02 +08:00
    LZ 腾讯的?
        37
    wdlth   2018-09-06 23:27:52 +08:00
    原来让你买 Tt 的钱都吃了回扣了?
        38
    kslr   2018-09-06 23:29:34 +08:00
    又要上八卦新闻了
        39
    pandasoda   2018-09-06 23:37:16 +08:00
    抱歉 笑出声
        40
    wtks1   2018-09-06 23:39:38 +08:00 via Android   ♥ 1
    想起了公司采购吃回扣吃的太多,结果买回来 200 多台跑 linux 的电脑各种故障频出,一开始也是各种查询日志各种重做系统,最后才发现全是硬件垃圾的锅
        41
    green15   2018-09-06 23:58:14 +08:00 via iPhone
    笑喷了,再检查检查,说不定还能找到槽点
        42
    azh7138m   2018-09-06 23:59:51 +08:00 via Android
    issue 可以关掉了吧
        43
    epkT6QJ3RSaz6AnJ   2018-09-07 00:26:24 +08:00
    围观
        44
    napoleonu   2018-09-07 01:49:55 +08:00
    号称 1000w 结果不到 500w 就跪了么,否则只是你自己选购的电源功率不够的问题吧。
        45
    FallMonkey   2018-09-07 01:54:49 +08:00
    看最后一个回复,好像还真不是 PDD 的锅?
        46
    realpg   2018-09-07 01:59:30 +08:00
    我觉得楼主有必要拍个电源的输出电流的标签,是不是多路 12V 的古董翻新电源啊
    那没准就不是电源的锅了
        47
    zhangpeter   2018-09-07 07:46:46 +08:00
    哈哈哈
        48
    hijkzzz   2018-09-07 08:01:21 +08:00
    笑出声
        49
    lxfxf   2018-09-07 08:39:04 +08:00
    公司采购脑子进雷碧了。
        50
    59php   2018-09-07 08:43:36 +08:00
    早晚要笑死在 V2
        51
    mengyaoss77   2018-09-07 09:54:15 +08:00
    厉害厉害
        52
    zxcslove   2018-09-07 13:10:00 +08:00
    电源有单路多路的说法,功率够了还得注意分配电源接口。
        53
    deadEgg   2018-09-07 15:33:06 +08:00
    pdd 确实让生活上一件弱智的事情变成了复杂的事情啊。

    推动世界低龄化发展。
        54
    ChalresZhu   2018-09-07 16:01:44 +08:00
    原谅我笑出了八块腹肌,哈哈哈
        55
    cache   2018-09-07 16:22:46 +08:00
    应该是公司采购的受害者
        56
    kokutou   2018-09-07 17:09:36 +08:00
    公司采购的受害者。。。
    振华、海啸不好吗。。。
        57
    LudwigWS   2018-09-07 18:56:22 +08:00
    还有这样的事情?
        58
    zsj950618   2018-09-07 21:59:16 +08:00   ♥ 2
    结果一堆人在一个英语交流的 issue 里回复中文,还有人在那边特意把原文翻译中文。

    呵呵。
        59
    sobigfish   2018-09-07 22:05:57 +08:00   ♥ 1
    @zsj950618 #58 有些人就是喜欢围观,围观就算了,还非得尿一个“到此一游” 😂
        60
    way2create   2018-09-07 22:07:44 +08:00
    有点意思
        61
    fwee   2018-09-07 23:25:46 +08:00 via Android
    @zsj950618 蠢货的狂欢
        62
    kaedea   2018-09-07 23:57:14 +08:00 via Android
    半夜笑出声
        63
    thebayarea   2018-09-08 00:08:56 +08:00
    3C 产品还是要在京东买
        64
    fuermosi777   2018-09-08 02:05:35 +08:00
    @zsj950618 确实呵呵了。
        65
    codechaser   2018-09-08 02:50:45 +08:00 via Android
    真的怀疑,哪个公司采购会去拼多多上采购?
        66
    00oo00   2018-09-08 05:57:15 +08:00 via Android
    虽然拼多多假货多,但是从硬件玩家角度来看,550w 电源的 12V 输出分为两路是没问题的,毕竟正常思路下一路给 CPU 一路给显卡,可以满足日用,也是电源厂家常用的节省成本方法。
    楼主你一不发电源品牌 型号 二不拍电源铭牌 连程序都不走就直接赖 pdd 我觉得不合适
        67
    maemolee   2018-09-08 07:52:49 +08:00
    哈哈哈哈哈
        68
    SoulGem   2018-09-08 16:18:19 +08:00 via iPhone
    哈哈哈哈哈哈哈哈哈哈哈哈哈哈
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   4107 人在线   最高记录 5043   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 33ms · UTC 08:08 · PVG 16:08 · LAX 00:08 · JFK 03:08
    ♥ Do have faith in what you're doing.