corehu
租用 GPU
← 所有文章
DRAFT分析

可中断 GPU 价格:风险与回报

CoreHu 团队·7 分钟阅读

为什么可中断的 GPU 租用比标准价格便宜这么多?我们分析中断风险、期望值公式,以及如何为您的工作负载做好准备。

01

什么是可中断价格?

可中断价格是指平台以远低于标准小时费率的价格出租闲置 GPU 容量。作为交换,当平台需要这些容量供标准租户使用时,保留以短时间通知将您停止的权利。

该模式与云计算中的“Spot/可抢占实例”相同:折扣是用中断风险换来的灵活性。

02

为什么这么便宜?

闲置的 GPU 不会为平台带来任何收入,而电费和折旧仍在持续。以低价填满这部分容量,高于边际成本的每个小时都是纯收益。

价格本身随供需波动:繁忙时段上涨,容量充裕时可降至标准费率的一半甚至更低。

03

风险:中断何时到来?

中断通常由需求上升触发:以标准费率租用的客户开始占用容量时,可中断租户会按优先级首先被收回。通知窗口很短,GPU 会被立即收回;持久化磁盘数据通常会保留,因此您可以从中断处继续。

对可中断租户而言,真正的问题不是“我会被中断吗?”,而是“被中断时我会损失什么?”

04

期望值公式

举个简单的例子:标准费率为 $1.20/h,可中断费率为 $0.45/h,每小时节省 60%。但每次中断都会增加重启和预热成本:如果您的工作负载每次中断平均损失 20 分钟,对于每 4 小时被中断一次的任务,实际成本差距会明显缩小。

正确的公式是:预期成本 = 小时费率 ×(使用小时数 + 重启所花小时数)。在投入长期项目之前,先用几天测试衡量中断频率。

05

管理风险:准备好工作负载

  • 定期保存检查点;有持久化磁盘时,中断只会损失时间。
  • 优先选择无状态、确定性的任务:渲染、仿真、超参数扫描、数据预处理。
  • 把工作拆成小块并通过队列运行;设备被中断时,队列会转移到其他容量上。
  • 能够在多台设备/多个区域并行运行的设计,可以分散中断概率。

06

哪些场景不适合?

在单张 GPU 上顺序推进、检查点成本高且有严格截止时间的训练任务不适合可中断模式,应使用标准租用。规则很简单:中断意味着延迟还是数据丢失?如果是延迟,可以考虑可中断;如果是丢失,绝对不要。

本页文章为示例内容;在 CMS 接入之前,均标记为未发布的草稿。