我们如何将文件夹下的文件从 Google 存储加载到 Big Query 中?
How can we load files under folder into Big Query from Google Storage?
我在 google 存储中有一个包含文件和子目录的文件夹。想使用架构将此文件夹下的所有文件上传到 bqdataset.bqdatatable。
如果我指定单个文件,它会成功上传文件,但在提供文件夹路径时却无法做到这一点。
请指教
此致。
一定有用!
你应该使用下面的来源
gs://your_bucket/your_folder/*
当然假设所有文件都具有相同的模式(你也应该提供)
然后将文件夹加载到一个 table
它既可以使用 BigQuery UI 也可以以编程方式使用 API
https://cloud.google.com/bigquery/docs/reference/v2/jobs#configuration.load
我在 google 存储中有一个包含文件和子目录的文件夹。想使用架构将此文件夹下的所有文件上传到 bqdataset.bqdatatable。
如果我指定单个文件,它会成功上传文件,但在提供文件夹路径时却无法做到这一点。
请指教
此致。
一定有用! 你应该使用下面的来源
gs://your_bucket/your_folder/*
当然假设所有文件都具有相同的模式(你也应该提供) 然后将文件夹加载到一个 table
它既可以使用 BigQuery UI 也可以以编程方式使用 API https://cloud.google.com/bigquery/docs/reference/v2/jobs#configuration.load