DataProc Presto 会自动获取新节点吗?
Will DataProc Presto pick up new nodes automatically?
我有一个包含 10 个节点并安装了 Presto 的 DataProc 集群。集群的Autoscaling功能开启。我想知道当 Presto 运行 并且集群扩展时,Presto 是否能够自动获取和使用额外的节点?我没有从 Google 的文档中找到答案。
我担心的是我需要手动重启 Presto,这违背了自动缩放的目的。我希望当 presto 获得更大的工作时集群和自动缩放。
Presto 将在集群扩展时自动选取新节点。
但是,请注意 Dataproc 自动缩放目前仅支持基于 YARN 指标的缩放(请参阅 docs)。您的集群不会根据 Presto 查询负载自动缩放,而是根据 YARN 上的负载自动缩放。
我有一个包含 10 个节点并安装了 Presto 的 DataProc 集群。集群的Autoscaling功能开启。我想知道当 Presto 运行 并且集群扩展时,Presto 是否能够自动获取和使用额外的节点?我没有从 Google 的文档中找到答案。
我担心的是我需要手动重启 Presto,这违背了自动缩放的目的。我希望当 presto 获得更大的工作时集群和自动缩放。
Presto 将在集群扩展时自动选取新节点。
但是,请注意 Dataproc 自动缩放目前仅支持基于 YARN 指标的缩放(请参阅 docs)。您的集群不会根据 Presto 查询负载自动缩放,而是根据 YARN 上的负载自动缩放。