aiknow
Ollama

Ollama

ollama.com

最流行的开源大模型本地运行工具,一条命令即可下载并运行 Llama、Qwen、DeepSeek 等模型。

开源有 API可自部署DeepSeekGLM / 智谱本地模型
GitHub ★ 182,177被推荐 5 次

适合做什么

适合想在本地或私有云部署大模型的开发者,用于终端对话、构建应用或保护数据隐私。

标签与属性

谁在推荐

@steven2358/awesome-generative-ai · awesome 列表出处 ↗
Ollama - Get up and running with large language models locally.
@mahseema/awesome-ai-tools · awesome 列表出处 ↗
Ollama - Load and run large LLMs locally to use in your terminal or build your apps.
@vince-lam/awesome-local-llms · awesome 列表出处 ↗
12 ollama 181,358 +458 (+0.3%) Infrastructure Get up and running with Kimi, GLM, MiniMax, DeepSeek, gpt-oss, Qwen, Gemma and other models.

同类推荐

本地部署 / 运行

纯 C/C++ 实现的 LLM 推理引擎,支持本地与云端多硬件高效运行大模型。

开源有 API多模态可自部署本地模型
github.com3 处推荐
本地部署 / 运行

vLLM

★ 93,170

高吞吐、省显存的开源 LLM 推理与服务引擎,支持 PagedAttention 与 OpenAI 兼容 API。

开源有 API可自部署DeepSeek通义千问
github.com1 处推荐
本地部署 / 运行

OpenAI Whisper 语音识别模型的 C/C++ 高性能移植版,无依赖、可离线本地运行

开源可自部署本地模型MacWindows
github.com1 处推荐
聊天客户端

开源本地大模型桌面应用,支持文本、视觉、工具调用,兼容 OpenAI/Anthropic API,完全离线隐私。

开源可自部署有 API支持 MCP多模态
github.com1 处推荐
本地部署 / 运行

Transformers.js

★ 16,339

Hugging Face 官方 JS 库,让 Transformers 模型直接在浏览器里运行,无需服务器。

开源多模态可自部署本地模型网页
github.com1 处推荐
本地部署 / 运行

开源本地 AI 引擎,无需 GPU 即可在任意硬件上运行 LLM、视觉、语音、图像、视频模型,兼容 OpenAI API。

开源有 API可自部署支持 MCP多模态
github.com1 处推荐