开源项目

unsloth

unsloth

本地桌面应用,用于运行和微调 LLM、扩散模型等,覆盖 CPU/NVIDIA/AMD/Intel/macOS 多硬件。内置 LoRA/QLoRA/RL/GRPO 训练、GGUF 导出、OpenAI 兼容 API,还能接 Claude Code、Codex 等 agent 和 MCP。相比同类主打训练速度快、省显存,并把 run/train/deploy 整合进同一 UI,近期因支持 Qwen3.8、DeepSeek-V4 等新模型而热度高。注意采用 Apache-2.0/AGPL-3.0 双许可。

README

Unsloth 标志

Unsloth 是第一款可以运行和训练模型的桌面应用。

功能 • 快速开始 • Notebooks • 文档

unsloth 桌面版

⚡ 快速开始

下载适用于你操作系统的原生 Unsloth 桌面应用:

平台 链接
Windows 下载
macOS 下载
Linux / Ubuntu (deb) 下载
Linux(AppImage) 下载
Linux(Arm64) 下载

从 Unsloth 或 GitHub Releases 下载。

或者,如果你更喜欢手动安装:

macOS、Linux、WSL:
curl -fsSL https://unsloth.ai/install.sh | sh
Windows:
irm https://unsloth.ai/install.ps1 | iex
社区:

⭐ 功能

Unsloth 让你可以在本地运行、训练和部署 AI 模型,支持所有类型的模型。

运行与构建 AI

  • 运行和训练 LLM(大型语言模型)、扩散模型、embedding(嵌入)模型和音频模型:Kimi K3、MiniMax-H3、Qwen3.8、Muse Glimmer、DeepSeek-V4、Gemma 4。
  • Agents(智能体)与工具: 配合 Claude Code、Codex 和 MCP 使用本地模型,包括工具调用和代码执行。
  • 搜索与 RAG(检索增强生成): 使用私密且无限制的网页搜索、深度研究和 RAG。
  • 图像与视频: 运行和训练图像和视频扩散模型或多模态模型。
  • 音频: 使用私密且无限制的网页搜索、深度研究和 RAG。
  • 硬件: 支持 CPU、NVIDIA、AMD、Intel、macOS 和多 GPU 配置。
  • 远程访问: 通过安全的 Cloudflare HTTPS 远程访问本地模型。

训练与部署

  • Fine-tuning(微调): 以快 2 倍、节省 70% VRAM 的方式训练 LLM、扩散模型、TTS 和 embedding 模型。
  • 完整支持: 支持强化学习、LoRA、QLoRA、全量微调、预训练、RL(强化学习)、GRPO、DPO 和 FP8。
  • 导出与部署: 导出或部署模型,支持 GGUF、NVFP4、FP8 等更多格式。
  • 数据集: 使用 Data Recipes 从 PDF、CSV、DOCX 等文件构建数据集。
  • OpenAI 兼容 API: 通过 OpenAI 兼容 API提供模型服务,并可连接到云服务商。

🚀 Unsloth Start

Unsloth Start 用一条命令将 Claude Code、Codex 和其他 agent(智能体)连接到本地模型。

启动 Unsloth,加载模型,打开你的项目文件夹,然后运行:

unsloth start claude

将 claude 替换为任何受支持的 agent(智能体):

Agent(智能体) 命令
Claude Code unsloth start claude
OpenAI Codex unsloth start codex
Hermes Agent unsloth start hermes
OpenClaw unsloth start openclaw
OpenCode unsloth start opencode

Claude Code、Codex 和 OpenCode 可以保留当前模型,并将 Unsloth 用作本地子 agent(subagent):

unsloth start claude --as-sub
开源项目unslothai2026-08-13原文

相关内容