HDInsight 群集的成本优化策略

已完成

HDInsight 成本优化的第一步是为所使用的工作负载选择正确的群集类型。 选择错误的群集类型可能会导致处理时间较长,以及所用计算资源超过所需。 这会产生可能与所进行作业不相称的成本,从而导致操作成本过高。

以前,选择正确的群集大小也同样重要,这是为了确保工作负载可以在需求达到峰值时也能迅速投入使用。 但之前,群集大小的选择方式是固定的。 只能暂停群集并手动为其配置新的大小,否则无法更改其大小。 这个操作不太方便,会延迟数据处理。

最近,HDInsight 推出了自动缩放功能,可缩放群集的计算,以满足即时处理需求。 自动缩放功能可在峰值需求期间扩展 HDInsight 群集,并在操作相对较少时进行缩减。 此功能确保可以最大限度地减少花费在 HDInsight 设置服务需求方面的费用。

应删除未被使用的群集。 可以使用 Apache Ambari 或 Azure Monitor 监视 HDInsight 群集,以识别未被使用的群集。