unsloth
unslothai/unsloth
本地運行和訓練大型語言模型及擴散模型的圖形界面應用
為什麼選它支持多種模型格式和GPU加速
安裝
- GitHub
- unslothai/unsloth
- 星數
- ★ 78.5k
- 授權
- Apache-2.0
- 語言
- Python
- 分類
- 本機執行
適合用來
- 在本機執行 Qwen、DeepSeek、Gemma 等 LLM、GGUF 與擴散模型
- 以較少 VRAM 微調 LLM、TTS、embedding 等模型,支援 LoRA、QLoRA、GRPO、DPO
- 用 unsloth start claude 等指令讓 Claude Code、Codex 使用本機模型
- 把模型匯出成 GGUF、FP8 等格式,或透過 OpenAI 相容 API 提供服務
怎麼開始
- 執行 curl -fsSL https://unsloth.ai/install.sh | sh(Windows 用 PowerShell 指令,或下載 Unsloth Desktop)
- 開啟 Unsloth,選擇要執行或訓練的模型
- 要接 agent 時執行 unsloth start claude 或 unsloth start codex
使用前須知
支援 Windows、Linux、WSL 與 macOS,可用 NVIDIA、AMD、Intel GPU、多 GPU、CPU 或 Vulkan 後端。
以上由 AI 依據專案說明整理,實際用法請以官方文件為準。
同類工具
- rtk本機執行 · ★ 84.5k
CLI代理工具,可減少LLM的token消耗60-90%
- Ollama本機執行 · ★ 185k
一行指令在本機下載並執行 Qwen、DeepSeek、Gemma、gpt-oss 等開放權重模型,並提供 OpenAI 相容 API。
- Open WebUI本機執行 · ★ 157k
自架的 ChatGPT 式網頁介面,可接 Ollama 與任何 OpenAI 相容 API,內建 RAG、網頁搜尋、多使用者與 MCP。
- Cherry Studio本機執行 · ★ 52.9k
跨平台桌面 AI 客戶端,一個介面整合多家雲端模型與本機 Ollama,內建知識庫、MCP、agent 與 300+ 助手範本。
- Jan本機執行 · ★ 45.1k
完全離線執行的 ChatGPT 式桌面 App,內建模型下載與 llama.cpp 引擎,也能切換到雲端 API。
出處 GitHub · 更新於 2026年10月24日 · 版權屬原作者