桃子桃子快讯
返回首页
工具

Unsloth 推出桌面应用:一站式本地运行与训练大模型

Unsloth 发布首个桌面应用,支持本地推理与训练模型,涵盖 MLX、扩散、音频、GGUF 等格式,号称训练速度翻倍、…

2026.08.11 · 周二2 分钟阅读

知名开源大模型微调工具 Unsloth 正式推出桌面应用 Unsloth Desktop,这是其首个面向桌面端的本地大模型运行与训练工具,支持 macOS、Windows 和 Linux 三大平台。Unsloth 在本地大模型社区以「更少显存、更快速度」的微调方案著称,此前主要以 Python 库形式被开发者使用,本次桌面化是其产品形态的重要扩展。

核心功能:推理与训练一体化

Unsloth Desktop 将本地推理、模型训练与开发工具整合在同一应用中,主要能力包括:

  • 支持 MLX、扩散类图像/视频模型、音频模型以及 GGUF 格式,覆盖主流本地部署格式。
  • 可运行 MiniMax-H3、Muse Glimmer 等模型,并预告即将支持 Qwen 3.8 系列。
  • 支持将 Claude Code、Codex 等编程 Agent 接入本地大模型。
  • 内置 RAG、深度研究、私有化网页搜索、MCP(Model Context Protocol)以及 NVFP4、GGUF 等格式导出能力。
  • 提供与 OpenAI 兼容的 API 接口,可在本地同时调用 OpenAI、Anthropic 等云端模型。

性能与硬件支持

官方在发布中强调了几项关键性能指标:训练速度提升约 2 倍,同时显存占用减少约 70%;工具调用场景下,自愈式(self-healing)工具调用与沙箱化代码执行号称比同类方案准确率提升约 50%。在硬件层面,Unsloth Desktop 支持纯 CPU 运行以及多 GPU 配置,兼容 NVIDIA、AMD、Intel 显卡以及 Apple Silicon Mac。

隐私与开源

Unsloth 明确表示该桌面应用完全开源,且不收集任何遥测或用户数据。用户可通过 Cloudflare HTTPS 安全地将本地模型远程部署并跨设备访问。应用现已在 unsloth.ai 与 GitHub 仓库 unslothai/unsloth 上提供下载与文档。

对于希望在本地完成模型推理与轻量微调的开发者而言,Unsloth Desktop 降低了环境配置门槛,将原本需要自行拼装的多个工具栈整合到一款开箱即用的产品中;但官方目前尚未公布详细的 benchmark 数据,相关性能宣称仍有待社区独立验证。

信源