如何在 Azure Databricks 中使用自定义 docker 图像
How to use a custom docker image with Azure Databricks
如何在 Azure databricks 中使用自定义 docker 图像?
我正在为 ML 使用 azure databricks 笔记本,但我想带一个自定义 docker。
将自定义 docker 图像用于 Azure Databricks
先决条件:
- Databricks 运行时 6.1 或更高版本。如果您之前使用过
Databricks 容器服务,您必须升级您的基础图像。
请参阅中的最新图像
https://github.com/databricks/containers 标记为 6.x。
- 你的 Azure Databricks 工作区必须有 Databricks 容器服务
已启用。
要在集群上使用自定义容器,工作区管理员必须按如下方式启用 Databricks 容器服务:
- 进入管理控制台。
- 单击“高级”选项卡。
- 单击容器服务旁边的启用按钮。
- 刷新页面。
- 你的机器必须是 运行 最近的 Docker 守护进程(一个
经过测试并适用于 Client/Server 版本 18.03.0-ce) 和
docker 命令必须在您的 PATH 上可用。
第 1 步:建立你的基地
Azure Databricks 成功启动集群有几个最低要求。
第 2 步: 推送您的基础映像
将您的自定义基础映像推送到 Docker 注册表。此过程已使用 Docker Hub 和 Azure 容器注册表 (ACR) 进行了测试。 Docker 不支持身份验证或基本身份验证的注册表应该可以正常工作。
第 3 步:启动集群
您可以使用 UI 或 API 启动集群。
参考: Azure Databricks - Customize containers with Databricks Container Services
如何在 Azure databricks 中使用自定义 docker 图像?
我正在为 ML 使用 azure databricks 笔记本,但我想带一个自定义 docker。
将自定义 docker 图像用于 Azure Databricks
先决条件:
- Databricks 运行时 6.1 或更高版本。如果您之前使用过 Databricks 容器服务,您必须升级您的基础图像。 请参阅中的最新图像 https://github.com/databricks/containers 标记为 6.x。
- 你的 Azure Databricks 工作区必须有 Databricks 容器服务 已启用。
要在集群上使用自定义容器,工作区管理员必须按如下方式启用 Databricks 容器服务:
- 进入管理控制台。
- 单击“高级”选项卡。
- 单击容器服务旁边的启用按钮。
- 刷新页面。
- 你的机器必须是 运行 最近的 Docker 守护进程(一个 经过测试并适用于 Client/Server 版本 18.03.0-ce) 和 docker 命令必须在您的 PATH 上可用。
第 1 步:建立你的基地
Azure Databricks 成功启动集群有几个最低要求。
第 2 步: 推送您的基础映像
将您的自定义基础映像推送到 Docker 注册表。此过程已使用 Docker Hub 和 Azure 容器注册表 (ACR) 进行了测试。 Docker 不支持身份验证或基本身份验证的注册表应该可以正常工作。
第 3 步:启动集群
您可以使用 UI 或 API 启动集群。
参考: Azure Databricks - Customize containers with Databricks Container Services