Slopographic

对比 · 核对日期 2026-10-24

在自己的电脑上运行 AI 聊天的最佳免费应用

本地 AI 模型在你自己的硬件上回答问题,因此你的聊天内容不会发送到云服务。这些应用中,有些像普通程序一样安装,有两款在浏览器中运行。下面根据各家官网,列出每款的功能。

我们开发的 Slop AI 是本页列出的工具之一。关于其他工具的所有事实,均来自其官方页面(每款下方均附链接),内容以 2026-10-24 时的为准。价格和功能会变化,选择前请以各官网为准。

我们如何进行对比

  • 在本地运行模型是否免费
  • 需要什么:安装、GPU、特定的操作系统或浏览器
  • 下载模型后可否离线使用
  • 模型的选择和大小
  • 附加功能:与文档、图片聊天,以及本地 API

一览

在自己的电脑上运行 AI 聊天的最佳免费应用:主要事实并排对照(核对日期 2026-10-24)
工具本地使用的价格运行环境安装模型离线
Slop AI 我们的免费支持 WebGPU 的浏览器无10 个模型,0.5B 至 7B(290 MB 至 4.3 GB)是,首次访问并下载后
LM Studio免费($0 方案)Apple 芯片 Mac、Windows x64/ARM、Linux桌面应用来自 Hugging Face 的 GGUF(llama.cpp)和 MLX是,模型下载完成后
Ollama免费($0 方案)macOS 14 及以上、Windows 10 22H2 及以上、Linux应用和命令行自有模型库,包括视觉模型未说明
GPT4All免费,MIT 许可证Windows、macOS 12.6 及以上、Ubuntu桌面应用数千个开源模型未说明
Jan免费,开源(Apache 2.0)macOS 13.6 及以上、Windows 10 及以上、Linux桌面应用Hugging Face 模型(Llama、Gemma、Qwen 等)是,称可 100% 离线运行
WebLLM Chat免费,开源(Apache 2.0)支持 WebGPU 的浏览器无WebLLM 内置模型,自定义 MLC 模型是,首次下载后
逐项对比:✓ 支持,◐ 部分支持或需付费方案,✗ 不支持,– 工具官方页面未说明
功能Slop AI 我们的LM StudioOllamaGPT4AllJanWebLLM Chat
本地模型免费 是 是 是 是 是 是
无需安装 是 否 否 否 否 是
聊天窗口 是 是 未说明 是 是 是
可离线使用 是 是 未说明 未说明 是 是
无需 GPU 即可运行 部分支持 未说明 部分支持 是 未说明 未说明
Windows 是 是 是 是 是 未说明
Mac 是Apple 芯片 是 是 是 未说明
Linux 部分支持 是 是x86-64 是 未说明
大型模型(13B 及以上) 否 未说明 未说明 未说明 是 未说明
你自己的模型文件MLC 格式 是 未说明 未说明 未说明MLC 格式
发送图片(视觉) 否 未说明 是 未说明 未说明 是
与你的文档聊天 部分支持 是 未说明 是 未说明 未说明
供其他应用使用的本地 API 否 是 是 未说明 是 否
MCP 工具 否 是 未说明 未说明 是 未说明
下载前检查硬件 是 未说明 未说明 未说明 未说明 未说明

1. Slop AI(我们的)

最适合: 在浏览器中检查你的电脑能运行什么,并与一个小模型聊天,无需安装,之后还可在 Slopographic 各应用中使用。

优点

  • “我的电脑能运行吗?”会测试 WebGPU 和内存,并在你下载前为每个模型评级
  • 每次下载前都会询问,之后模型保留在你的设备上
  • 可在沙盒预览中生成小型单文件应用,并可打开和操作其他 Slopographic 应用
  • 聊天记录保存在你的设备上,并可导出为 Markdown 或 JSON
  • 其他 Slopographic 应用中的 AI 按钮使用相同的模型,也可使用你电脑上的 Ollama 或 LM Studio,或使用你自己的云端模型密钥
  • 在手机、平板和电脑的浏览器中运行,离线也能用

不足

  • 仅支持小模型(最高 7B),因此回答质量不及桌面应用能运行的大模型
  • 仅支持文字:无法向模型发送图片
  • 没有供其他程序使用的本地 API
  • 需要 WebGPU,并且仍处于测试版

打开 Slop AI

2. LM Studio

最适合: 在免费的桌面应用中运行较大的开源模型,具有聊天窗口和本地 API。

优点

  • 可运行 llama.cpp 模型,并可在 Apple 芯片上运行 MLX 模型
  • 可与文档和 MCP 服务器聊天
  • 以类似 OpenAI 的端点提供模型服务
  • 可以完全离线运行

不足

  • 建议 16 GB 内存;Windows 上需要 4 GB 独立显存
  • 不支持 Intel 芯片的 Mac
  • 付费方案(每月 20 美元和 100 美元)针对其云端模型

LM Studio 官网 · 来源: LM Studio 价格, LM Studio 系统要求, LM Studio 文档

3. Ollama

最适合: 希望把本地模型放在 API 后面,供自己的应用和编码工具使用的开发者。

优点

  • 本地 API,兼容 OpenAI 和 Anthropic 的客户端
  • Windows 上支持 NVIDIA 和 AMD Radeon 显卡
  • 可接收图片的视觉模型
  • MIT 许可证

不足

  • 以命令行和 API 为核心设计
  • 付费方案(每月 20 美元和 100 美元)针对云端模型和用量积分
  • 在 Intel 芯片的 Mac 上只能使用 CPU 运行

Ollama 官网 · 来源: Ollama 价格, Windows 版 Ollama, macOS 版 Ollama, Ollama 视觉功能, Ollama OpenAI 兼容性, GitHub 上的 Ollama, Ollama 文档, Ollama 快速入门

4. GPT4All

最适合: 一款私密的桌面聊天机器人,即使没有 GPU,也能在普通笔记本电脑上运行,并可与你的文件对话。

优点

  • 据其 README,无需 API 调用,也无需 GPU
  • LocalDocs:与你自己的文档对话
  • 称没有任何数据会离开你的电脑

不足

  • Linux 版本仅支持 x86-64
  • 至少需要 Intel Core i3 第二代或 AMD Bulldozer 处理器

GPT4All 官网 · 来源: GPT4All 首页, GitHub 上的 GPT4All

5. Jan

最适合: 一款开源的 ChatGPT 风格桌面应用,可按需把本地模型与云端模型混合使用。

优点

  • 位于 localhost:1337 的本地 OpenAI 兼容 API
  • MCP 集成
  • 也可连接 OpenAI、Anthropic、Mistral 和 Groq

不足

  • 其自带指南:在 Mac 上,3B 模型需 8 GB 内存,7B 需 16 GB,13B 需 32 GB

Jan 官网 · 来源: Jan 首页, GitHub 上的 Jan

6. WebLLM Chat

最适合: 无需安装,直接在浏览器中体验本地 AI,包括视觉模型。

优点

  • 借助 WebGPU 在浏览器中运行,不做服务器端处理
  • 支持视觉模型:可发送图片
  • 完成初始设置后可离线使用

不足

  • 需要 WebGPU,因此并非所有浏览器或电脑都能运行
  • 自定义模型必须编译为 MLC 格式

WebLLM Chat 官网 · 来源: GitHub 上的 WebLLM Chat

如何选择

如果你想要一个无需安装、私密的 AI 聊天工具,我们推荐 Slop AI:它会先告诉你电脑能运行哪些模型,每次下载前都会询问,模型和聊天记录都保留在你的设备上,之后还能离线使用,并能生成小型应用,操作其他 Slopographic 应用。它的模型较小(最高 7B)且仅支持文字,因此不要期望它的回答能与大型桌面模型相比。

如果你能安装应用、拥有 16 GB 内存,并想使用更大的模型、文档聊天、MCP 和本地 API,可选择 LM Studio。如果你需要把模型放在 API 后面供自己的工具使用,可选择 Ollama;如果你使用的笔记本没有 GPU,可选择 GPT4All;如果你需要一款可以混合使用本地和云端模型的开源应用,可选择 Jan;如果你想在浏览器中向模型发送图片,可选择 WebLLM Chat。

常见问题

本地 AI 真的私密吗?

模型在你的电脑上运行,因此本地聊天不必离开电脑。GPT4All、Jan、LM Studio 和 WebLLM Chat 都在各自的页面中作了说明。在 Slop AI 中,聊天内容保留在你的设备上;它只在下载你所选模型时联网。一些应用也可以连接到云端模型,而当你添加自己的密钥时,其他 Slopographic 应用中的 AI 按钮也可以这样做;这些聊天内容确实会发送给相应的服务商。

我需要什么样的电脑?

LM Studio 建议 16 GB 内存;Jan 则建议在 Mac 上,3B 模型使用 8 GB,7B 模型使用 16 GB。GPT4All 无需 GPU 即可运行。浏览器应用需要 WebGPU;Slop AI 的系统检查会在你下载模型之前告诉你哪些模型可以运行。

这些应用能离线使用吗?

LM Studio、Jan 和 WebLLM Chat 称,模型下载完成后即可离线工作。Slop AI 同样如此:首次访问并下载模型后即可离线使用。

哪个最强大?

桌面应用(例如 LM Studio)能运行比浏览器应用更大的模型。Slop AI 和 WebLLM Chat 则为了无需安装而牺牲了模型规模。

其他产品名称归其所有者所有。Slopographic 与它们没有关联。