LLM VPS - 在您的服务器上运行 Ollama 和 AI 模型

在欧盟 VPS 上用 Ollama 自建 LLM 推理:Ryzen 9 7950X3D,最高 96 GB 内存,完整 root,不按 token 收费。附指南,每月 €13 起,可用加密货币支付。

在 CPU VPS 上运行良好的应用

先说实话:这是 CPU 服务器,不是 GPU 云。在配备高速 NVMe 的 Ryzen 9 7950X3D 上,量化的 7B–14B 模型(Q4/Q5)生成 token 的速度足以用于聊天、分类、信息提取和调用工具的智能体。这能覆盖大多数内部工具。如果您需要 70B 模型每秒数百个 token - 那是 GPU 的领域,我们会直说。

按模型大小推荐套餐

工作负载套餐能容纳
实验、嵌入向量、小型聊天Core VPS 4 NVMe - €13/月8 GB 内存:轻松运行 7B Q4 模型
生产环境智能体、工具、RAGCore VPS 12 NVMe - €60/月48 GB 内存:14B Q5 + 向量数据库并行
大上下文、批处理任务、多个模型Performance Plus 16 - €165/月64 GB 内存和 16 vCPU,用于并行处理提示

四条命令搭好技术栈

  1. 部署 NVMe 套餐 €13 起,用加密货币支付。
  2. 安装 Ollama Ollama 指南涵盖安装、拉取模型、绑定 API 和 systemd。
  3. 安全地对外开放 绑定到 localhost,前面放您的应用或带认证的反向代理 - 切勿把原始 API 直接暴露在互联网上。

常见问题

你们有 GPU 服务器吗?

不行 - 我们也不会假装可以。GPU 推理请找 GPU 服务商;对于适合 CPU 的模型、私有数据和可预期的成本,这才是更好的工具。

API 有调用频率限制吗?

没有 - 这是您自己的 localhost。只有您自己在前面加代理时才会有限流。

模型更新如何进行?

需要新标签时执行 `ollama pull`;满意之前保留旧标签 - 唯一的成本是磁盘。

无需按量付费的推理 固定月费,完整 root,欧盟数据中心。 为 AI 部署 →

相关内容

查看套餐指南常见问题