avatar

阿B是只猫

闲的没事干!

  • 入门教程
  • 只买不用
  • 有线路由
Home 没有N卡也能使用开源AI大模型
文章

没有N卡也能使用开源AI大模型

Posted 2025-02-10 Updated 2025-02- 10
By Administrator
6~7 min read

前言

DeepSeek已经发布一段时间了,但是目前的部署教程都是基于NVIDIA的,而 AMD 显卡的兼容性相对较弱,也就没那么多人关心这一部分,今天就来演示如何使用AMD显卡吃上DeepSeek。

注意!!!!

本篇文章只演示我使用的显卡型号------7800XT

Windows下Ollama支持的显卡型号

打开ollama官方文档可以查看更详细的说明

以下是部分消费级显卡型号可使用的模型版本

准备

  • AMD显卡驱动 25.1.1(这个版本为测试版)

  • AMD HIP SDK for Windows 6.2.4

  • Ollama程序 或者 LM Studio(二选一)

自行解决网络问题!

步骤

  1. 确定显卡型号,演示使用的是7800XT

  2. 下载上述驱动并安装。

  3. 下载Ollama或者Lm studio并安装。

  4. 如你使用Ollama请打开官网,选择你需要的模型,并按照提示运行命令,等待模型下载完成。自行解决网络问题!

  5. 如你使用LM studio 它会自行提示让你下载一个适合你的模型,后面你可以更改。

  6. 打开任务管理器,查看专用GPU内存是否增加。这样来确定是否为GPU进行加速计算。(一般回答太慢使用的就是CPU,GPU整体都挺快的)

最后

使用AMD显卡本地部署也就完成了,我的7800XT是大概3500块钱买的,性能是不如英伟达4070好,但是性价比相对较高,希望AMD后面能追回来一些吧。这样网络上关于AMD的教程也就越来越多了。

入门教程
教程
License:  CC BY 4.0
Share

Further Reading

Jun 19, 2025

小主机体验Steam OS

前言 国内的掌机基本都是搭载WIndows系统,现在SteamOS终于可以安装在第三方的掌机上了,不用什么魔改版,直接上Steam Deck同版系统。 注意Steam OS 目前仅支持AMD CPU,必须安装有NVME硬盘。 步骤

Feb 21, 2025

字节与硅基大模型API的使用方法

前言 由于我自己的设备性能并不强,不能跑满血版的模型,所以还是需要找可以提供API的站点,好消息是由于DeepSeek的火热,让许多大公司都免费赠送了额度,轻量使用还是非常不错的,所以下面就来演示一下。 准备 当然还有很多大公司,比如腾讯,阿里,NVIDIA等等,只是单纯的用了这两个出现次数最多的而

Feb 10, 2025

没有N卡也能使用开源AI大模型

前言 DeepSeek已经发布一段时间了,但是目前的部署教程都是基于NVIDIA的,而 AMD 显卡的兼容性相对较弱,也就没那么多人关心这一部分,今天就来演示如何使用AMD显卡吃上DeepSeek。 注意!!!! 本篇文章只演示我使用的显卡型号------7800XT Windows下Ollama支

OLDER

ClawCloud的日本节点

NEWER

字节与硅基大模型API的使用方法

Recently Updated

  • 小主机体验Steam OS
  • 台湾 VPS 仅 $2 / 月
  • 字节与硅基大模型API的使用方法
  • 没有N卡也能使用开源AI大模型
  • ClawCloud的日本节点

Trending Tags

Halo 教程 测试 VPS github IPTV PVE

Contents

©2025 阿B是只猫. Some rights reserved.

Using the Halo theme Chirpy