关于该类别
这是什么、用来做什么
AI 服务器是配备多块 GPU 或 AI 加速器、高速内存和高性能网络的机架式系统。它是训练自有模型、或同时向大量用户提供语言与视觉模型服务的基础。与云端不同,数据留在企业内部,成本也不随用量波动。
企业中的典型应用
- 为全体员工提供语言模型服务,例如内部聊天助手。
- 使用企业数据训练或微调自有模型。
- 集中分析大量摄像头的图像与视频。
- 仿真与科研,例如机器人或材料研发。
企业采购时应关注的要点
- 单卡显存与总显存决定可运行的模型规模。
- 数据中心的供电、散热方式(风冷或液冷)与机柜空间。
- 跨多台机器训练时,需要 GPU 之间及服务器之间的高速互联。
- 加速器的软件生态、现场服务、出口管制与交期。
集成与投入投入:较高
下单前须与数据中心确认供电、散热与网络。随后是上架安装、操作系统、驱动,以及 Kubernetes 或 Slurm 等平台、访问权限与监控的部署。长期运行需要专门团队或服务商负责更新与故障处理。
目录中
AI 服务器:15 款产品一览
产品信息依据制造商公布。排序:先列出有参考价的产品,其余按名称排列。合作伙伴不享有优先。
参考价:不具约束力,取整,不含增值税、运费和关税。被收录不代表是合作伙伴。
合适的软件
- vLLM(在新标签页打开)开源 · Apache-2.0在 GPU 硬件上处理大量并发请求的推理服务器。
- Kubernetes(在新标签页打开)开源 · Apache-2.0将应用与计算任务分配到各台服务器并保持稳定运行。
- Slurm(在新标签页打开)开源 · GPL-2.0在 GPU 集群上调度训练与计算任务,广泛用于科研与高性能计算。
- Ray(在新标签页打开)开源 · Apache-2.0将训练与数据处理扩展到多台机器上。
- Triton Inference Server(在新标签页打开)开源 · BSD-3-Clause通过统一接口部署来自不同框架的模型。
- NVIDIA AI Enterprise(在新标签页打开)商业授权NVIDIA 提供的企业级 AI 软件套件,附带厂商技术支持。
许可信息仅供参考,以各项目自身许可为准。如有需要,我们可按固定价格负责部署与集成。
Research
相关报告
常见问题
关于“AI 服务器”的问题
- “AI 服务器”类产品的价格大概是多少?
- OROBO 目录中该类别的 15 款产品暂无公开参考价,仅接受询价。我们会为您获取报价;仅卖方报价具有约束力。
- “AI 服务器”类目收录了哪些制造商?
- 该类别收录了来自 4 个国家/地区的 14 家制造商:美国(7)、中国台湾(5)、德国(1)、韩国(1)。目录中包括:Cerebras Systems、Etched、Rebellions Inc.、SambaNova Systems、Thomas-Krenn.AG、云达科技、华硕、微星、慧与、技嘉、研扬科技、美超微,另有 2 家。目前 OROBO 与这些制造商均未签订合作协议——被收录不代表是合作伙伴。
- OROBO 自己销售这些产品吗?
- 不是。OROBO 只做撮合,自己不销售。我们核实需求与用途,将买卖双方与欧盟和美国的制裁名单比对,并向制造商或其经销商获取报价。合同、付款、交付与质保均在您与卖方之间直接进行。撮合对您免费;目前我们仅为欧盟、欧洲经济区、瑞士和英国的买家提供撮合。
- 询价需要提供哪些信息?
- 请提供数量、目标与时间,如已确定也可提供预算。硬件顾问只需几步即可帮您找到合适的硬件类别。询价免费且无约束;只有在您同意后,您的联系方式才会提供给卖方。
- 是否适用出口管制?
- 该类别中,14 家制造商中有 11 家的产品可能适用出口管制规定。每次撮合前,我们会将买卖双方与欧盟和美国的制裁名单比对,并询问用途;出口许可由卖方负责。
“AI 算力”中的其他类别
不确定哪款合适?
硬件顾问会询问您的目标、规模和预算,并推荐合适的硬件与软件。随后我们免费为您获取报价。
产品信息与价格来自制造商公开资料(截至 2026 年 11 月 3 日,外币按欧洲央行汇率换算)。价格为不具约束力的约数参考价,不含增值税、运费和关税;仅卖方报价具有约束力。类别说明为一般信息,不能替代具体评估。