为什么要本地部署?
- 绝对隐私保护|敏感数据0外传
- 永久离线运行|摆脱网络延迟/服务器卡顿
- 自主硬件调度|根据配置灵活调整模型
部署前必看
- 推荐配置:NVIDIA独显+16GB内存起
- 核显方案:12代酷睿处理器起步
- 系统要求:Win10/11或Linux最新发行版
10步极速部署教程
- 获取LM Studio
官网直达:https://lmstudio.ai
选对应系统版本|建议默认路径安装 -
语言设置技巧
启动后首屏右下角切换中文界面 -
模型获取方案
▸ 常规渠道:需魔法访问HuggingFace
▸ 镜像方案:https://hf-mirror.com(搜索栏输入模型ID) -
挑选部署模型:
-
查看已下载模型:在软件相应位置查看。
-
选择聊天功能:进入聊天板块。
-
加载模型:注意避免选太高配置致内存占满卡死,可先选小配置,依电脑占用调整,进度条不动可输入数字
-
完成加载:等待模型加载完毕。
-
开始对话:模型加载好后,即可断网对话,模型自行推理出结果。
没有回复内容