V2 独立版愿景

系统要求

HeteroFlow 是本站的异构算力与大模型调度产品。系统要求。系统要求 硬件验证边界(截至 2026-10-20) :本文中的“10 种品牌/检测器”指代码检测与适配范围,不代表 10 种硬件都完成了真机端到端验证。现有项目记录显示 NVIDIA 多机型已有真机端到端证据;国产加速卡检测逻辑已做软件及厂商命令输出对照,真机端到端验证仍待对应…

系统要求

> 硬件验证边界(截至 2026-10-20):本文中的“10 种品牌/检测器”指代码检测与适配范围,不代表 10 种硬件都完成了真机端到端验证。现有项目记录显示 NVIDIA 多机型已有真机端到端证据;国产加速卡检测逻辑已做软件及厂商命令输出对照,真机端到端验证仍待对应硬件。

Server(管理节点)

最低配置

组件要求
操作系统Linux (Ubuntu 20.04+ / CentOS 7+) / macOS
CPU2 核+
内存2GB+
磁盘10GB+
网络可访问所有 Agent 节点

软件依赖

软件版本用途
Go1.22+编译后端
Node.js18+编译前端
PostgreSQL14+数据存储(可选 SQLite)
Git2.0+拉取源码

网络端口

端口用途
3333后端 API + OpenAI 兼容网关
5173前端开发服务器(Vite)

Agent(GPU 计算节点)

最低配置

组件要求
操作系统Linux (Ubuntu 20.04+ / CentOS 7+)
CPU4 核+
内存8GB+
GPU1 张+(支持 10 种品牌)
网络可访问 Server 的 3333 端口

软件依赖

软件版本用途
Docker20.10+容器化任务执行
GPU 驱动各厂商最新版GPU 检测和计算

GPU 驱动

GPU 品牌驱动/工具验证命令
NVIDIACUDA Drivernvidia-smi
海光 DCUDTKhy-smi
华为昇腾CANNnpu-smi
摩尔线程MUSAmthreads-gmi
寒武纪Cambricon Drivercnmon
壁仞Biren Driverbirensmi
沐曦MetaX SDKcorex-smi
天数智芯Iluvatar SDKixsmi
百度昆仑XPU SDKxpu_smi
燧原Enflame SDKenfma-smi

Docker 运行时

NVIDIA GPU 需要额外安装 Container Toolkit:

sudo apt-get install -y nvidia-container-toolkit
sudo systemctl restart docker

磁盘空间

用途建议
系统和 Agent5GB
Docker 镜像20GB+(推理引擎镜像较大)
模型存储视模型大小,建议 100GB+

存储后端

类型适用场景系统要求
SQLite≤5 节点,开发测试无额外依赖
PostgreSQL>5 节点,生产环境PostgreSQL 14+

推理引擎镜像要求

引擎镜像大小GPU 要求
vLLM~8GBNVIDIA CC ≥ 7.5
llama.cpp~2GB兼容旧 GPU
SGLang~8GBNVIDIA CC ≥ 7.5
MINDIE~10GB华为昇腾

网络要求

  • Server ↔ Agent:TCP 3333 端口双向可访问
  • Agent → Docker Hub/Registry:可拉取推理引擎镜像
  • 前端 → Server:TCP 3333 端口可访问