跳到正文
热点事件持续更新

AI PC本地大模型配置科普:显存与统一内存决定能跑多大

1 篇报道1 个报道来源19 小时前更新

先了解这件事

AI 综述

秋芝2046 发布科普文章,用“厨房”比喻解释 AI PC 运行本地大模型的硬件原理:CPU/GPU 是主厨与帮厨,内存/显存是备菜台,带宽是传送带。文章称消费级旗舰显卡 5090 显存仅 32G,放不下 72B、125B 大模型;统一内存让 CPU 与 GPU 共用内存,从而能在常用电脑上直接跑千亿参数模型。 文章给出常见配置可跑模型规模的速查表,并列举本地模型省钱、隐私、随时可用三大用途。

AI 根据报道生成 · 53 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. 秋芝2046
    你的电脑能跑多大的AI?AI PC本地大模型配置科普

    秋芝2046 用"厨房"比喻讲解 AI PC 运行本地大模型的原理:CPU/GPU 对应主厨与帮厨,内存/显存是备菜台,带宽是传送带,消费级旗舰显卡 5090 显存仅 32G,放不下 72B、125B 大模型。统一内存让 CPU 与 GPU 共用大备菜台,从而在常用电脑上直接跑千亿参数模型。文章还给出常见配置可跑模型规模的速查表,并列举本地模型省钱、隐私、随时可用三大用途。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。