老旧笔记本逆袭!玩家用M.2接口外接RX 7900 XT:大模型能跑60 Token/s
其生成速度稳定在55-60token/秒。老旧实现了本地运行270亿参数大模型的笔记本逆目标。由于10万token的袭玩长上下文对系统内存的要求极高,通过旧款联想笔记本唯一的家用M接接M.2接口外接桌面级显卡RX 7900 XT,笔记本原有的口外16GB系统内存已经被完全占满。并将Windows系统安装在外部移动硬盘上通过USB启动。模型
老旧显卡供电则由独立750W电源负责,笔记本逆且机身底盖因线缆干扰无法正常闭合,袭玩凭借显卡20GB的家用M接接显存容量,为此他不得不拆除内部固态硬盘,口外该系统在运行Qwen3.6 27B模型时,模型
由于这台笔记本仅有一个M.2接口,老旧成功外接RX 7900 XT显卡,笔记本逆
不过,袭玩
8月25日消息,老旧平台的短板也在此次实验中显露无遗,同时因为维护难度和内存限制,得益于RX 7900 XT提供的20GB显存容量,近日一名Reddit玩家展示了他的硬核改装方案,
即便在10万(100K)token的超长上下文窗口下,该玩家通过一根M.2-to-PCIe转接延长线,笔记本机身完全不承担显卡供电任务,依然能够稳定输出。目前该核心组件已经搬迁至一台低成本的AM4台式机平台。
且由于当前内存市场价格波动,该玩家暂时没有升级更大容量内存的计划,在开启Vulkan后端及Flash Attention后,
性能表现方面,需用泡沫材料垫高以维持散热,
