我们如何将文件夹下的文件从 Google 存储加载到 Big Query 中?

How can we load files under folder into Big Query from Google Storage?

我在 google 存储中有一个包含文件和子目录的文件夹。想使用架构将此文件夹下的所有文件上传到 bqdataset.bqdatatable。

如果我指定单个文件,它会成功上传文件,但在提供文件夹路径时却无法做到这一点。

请指教

此致。

一定有用! 你应该使用下面的来源

gs://your_bucket/your_folder/*

当然假设所有文件都具有相同的模式(你也应该提供) 然后将文件夹加载到一个 table

它既可以使用 BigQuery UI 也可以以编程方式使用 API https://cloud.google.com/bigquery/docs/reference/v2/jobs#configuration.load