followadc
V2EX  ›  Mac mini

64g 的 mac 真的有能跑能用的 ai 本地大模型么

  •  
  •   followadc · 2h 29m ago · 1009 views
    64g 的 mac 真的有能跑能用的 ai 本地大模型么,Qwen3.8-27B-8bit 都费劲
    16 replies    2026-09-01 11:36:57 +08:00
    Wxh16144
        1
    Wxh16144  
       2h 23m ago
    我的 m4 pro mac mini 同内存,反正是跑不了.. 折腾一圈还是 ds 香
    rockddd
        2
    rockddd  
       2h 21m ago
    看用来做什么,编码不行.但是可以跑解禁大模型,例如猎奇了一下如何制作 C4...
    foryou2023
        3
    foryou2023  
       2h 13m ago
    不能干活,聊天可以。
    x86
        4
    x86  
       2h 9m ago   ❤️ 1
    🙅‍♂️不利于涨价卖设备的帖子不要发🐶
    NG6
        5
    NG6  
       2h 5m ago
    我也挺好奇的,真的有人专门买几十 GB 的 Mac 跑本地大模型么,这个级别的内存能跑动的 AI 智力都挺底下的吧,远不如便宜的厂商直供 API
    miniliuke
        6
    miniliuke  
       2h 4m ago
    @x86 关键 16g 、24g 、32g 的也大幅涨价,搞不懂,低智模型(不能主力写代码的)的 API 比矿泉水还便宜,真的有那么多人需要吗?
    BretTaylor
        7
    BretTaylor  
       2h 0m ago
    主要本地搭建一些无审查的模型。
    idcidc
        8
    idcidc  
       1h 58m ago
    只是你刚好有 而且要求不高 可以玩玩 特地去买没必要 还不如用 api 一台机器的钱能用好几年的 api 呢
    Cruzz
        9
    Cruzz  
       1h 55m ago
    可以猎奇。问点在线模型不能问的。前两天在 x 上看不有个姑娘做个赛博调教工具么。
    Sezxy
        10
    Sezxy  
       1h 54m ago
    也就跑跑 8B 的小模型用来梵音
    Sezxy
        11
    Sezxy  
       1h 54m ago
    梵音 =》 翻译
    keyu1103
        12
    keyu1103  
       1h 48m ago
    64g 挺尴尬的 能用的模型跑不起来,小模型又没必要
    qweruiop
        13
    qweruiop  
       46 mins ago
    只能聊天,不能干活,那个 context length 太小了,感觉吹能干活的都是收了广子的。。。
    Hilong
        14
    Hilong  
       14 mins ago
    干不了活。但是一些分类的事情还是能跑。我本地跑了个 2B 的小模型,用来给我的账单做分类打标。速度很快
    dushixiang
        15
    dushixiang  
       2 mins ago
    跑不动,我的建议是等
    kuhung
        16
    kuhung  
       Just Now
    性价比一般,只能跑垂直模型。不如直接用官方 API ,本地模型一般只适合大企业出于安全和微调考虑,或者极客玩玩罢了。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   5629 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 43ms · UTC 03:37 · PVG 11:37 · LAX 20:37 · JFK 23:37
    ♥ Do have faith in what you're doing.