加载到BigQuery中时如何从CSV文件中删除页脚记录

Question

我需要在没有页眉和页脚记录的情况下将Gscs文件从GCS加载到BigQuery。

我很难将页脚从加载到BigQuery中删除

在Google文档中，它说的是有关标题行和跳过标题的方式，而不是有关页脚行的说明

对于标题行，我将使用

   job_config=bigquery.LoadJobConfig()
   job_config.skip_leading_rows=1

Answer 1

我认为BigQuery API不包含此功能，您可以为此打开Feature request。

从您的代码中，我了解到您正在使用python作为跳过页脚行的解决方法：

1. 使用Pandas从GCS读取csv文件
2. 删除最后一行：

df.drop(df.tail(1).index,inplace=True)

1. 将其加载到BigQuery，跳过标题行。