文章目录
Gemma 4 越狱版开源大模型,本地部署教程|免费无限制・无需 Token
这一期教大家在本地部署 Gemma 4 越狱版 大模型,能力非常强悍、自由度更高,不需要 API、完全免费、离线也能用。搭配 Ollama + Open WebUI,一步一步带你从零跑起来,小白也能轻松搞定。只有你不敢想的,没有它不敢做的。
零、环境准备
Gemma 4 分为不同的参数版本,如果没有显卡环境,推荐使用腾讯免费算力,有多种显卡可以选择,并且首次注册登录就赠送算力。
地址:https://cloudstudio.net/
一、安装 Windows Terminal
Windows 终端程序是一款新式、快速、高效、强大的终端应用程序,适用于命令行工具和命令提示符、PowerShell、WSL 等 Shell 用户。主要功能包括多个选项卡、窗格、Unicode 和 UTF-8 字符支持、GPU 加速文本渲染引擎以及自定义主题、样式和配置。
下载地址:https://apps.microsoft.com/detail/9n0dx20hk701?hl=zh-CN&gl=CN
二、安装 WSL
在 PowerShell(管理员)执行安装 WSL 命令:
wsl --install
安装完成后重启电脑,然后安装 Ubuntu 命令:
wsl --install -d Ubuntu
打开 Windows Terminal,进入 Ubuntu 环境。
三、更新 Ubuntu 系统
更新系统命令:
sudo apt update
sudo apt upgrade -y
sudo apt install pipx -y
一键协议升级(HTTP → HTTPS,解决下载更新慢):
sudo sed -i 's|http://|https://|g' /etc/apt/sources.list.d/ubuntu.sources
四、安装环境依赖
1. 安装 Python
sudo apt install python3-pip python3-venv -y
2. 安装解压缩软件
sudo apt install -y zstd
3. 安装 Node.js
curl -fsSL https://deb.nodesource.com/setup_22.x | sudo -E bash -
sudo apt install -y nodejs
4. 安装 Git
sudo apt update
sudo apt install -y git
检查是否安装成功
node -v
npm -v
git --version
五、安装 Ollama
Ollama 官网:https://ollama.com/
安装命令:
curl -fsSL https://ollama.com/install.sh | sh
六、下载安装 Ollama Gemma 4 越狱版 AI 模型
越狱版模型列表:https://huggingface.co/collections/TrevorJS/gemma-4-uncensored
| 模型 | 参数规模 | Q4_K_M 显存 | Q8_0 显存 | 推荐显卡 |
|---|---|---|---|---|
| E2B(5B) | 5B | 6~8GB | 10~12GB | 4060 / 笔记本 |
| E4B(8B) | 8B | 10~12GB | 14~16GB | 4070 / 3080 |
| 26B(A4B) | 26B | 18~22GB | 28~32GB | 3090 / 4090 |
| 31B | 31B | 22~24GB | 32~40GB | 4090 / A100 |
各版本安装命令
- E2B(5B)
ollama pull hf.co/TrevorJS/gemma-4-E2B-it-uncensored-GGUF:Q4_K_M
- E4B(8B)
ollama pull hf.co/TrevorJS/gemma-4-E4B-it-uncensored-GGUF:Q4_K_M
- 26B(A4B)
ollama pull hf.co/TrevorJS/gemma-4-26B-A4B-it-uncensored-GGUF:Q4_K_M
- 31B
ollama pull hf.co/TrevorJS/gemma-4-31B-it-uncensored-GGUF:Q4_K_M
七、安装配置 Open WebUI
Open WebUI 官网:https://openwebui.com
安装命令:
pipx install open-webui
修复环境变量:
pipx ensurepath
source ~/.bashrc
启动 Open WebUI(重启电脑后再次启动用同一条命令):
open-webui serve
访问控制面板 URL:
http://localhost:8080
1454

被折叠的 条评论
为什么被折叠?



