提取 Databricks 集群依赖项并将它们添加到 build.sbt 中以在 Azure DevOps 中构建 jar

Question

我正在构建 DevOps CICD 管道，需要我：

1. 自动检测并提取 Databricks 集群中的所有依赖项
2. 将它们自动插入到 Azure Repos
中已经存在的 build.sbt 3. 在那里构建管道以构建 jar

我目前在第 1 步和第 2 步中受阻。我已经研究过插件。但我不确定这是否是正确的方向。还是我应该研究自动化？如果有人能指出正确的方向，那就太好了。

一切都必须在 Azure 平台上完成。所以，没有 IntelliJ。我猜只有 bash 命令？

Answer 1

找了很多办法都没有成功。我最终通过编写脚本（在 python 或 bash 上）来做到这一点。目标是将脚本放入 Azure DevOps 管道中，使一切自动化。