Apache Beam 管道中的 Conda 依赖项

Conda Dependencies in Apache Beam Pipeline

Beam 的文档列出了如何为远程执行运行器提供依赖项 here;但是,PyPI 似乎是唯一受支持的内置包管理器。是否可以指定 conda dependencies/a conda 环境文件来安装和执行?

不,这还不可能。然而,Beam 正在转向一个框架,在该框架中,人们可以通过 docker 图像提供一组依赖项,在这种情况下,人们可以根据需要安装所需的依赖项(包括通过 conda)。