有时,在成功处理了一百万行数据集之后,我会收到“Response too large to return”错误消息。当我尝试两百万行数据集时,也抛出了同样的消息。交易大小有限制吗?错误消息:查询操作中的BigQuery错误:处理作业‘...’时出错:响应太大,无法返回。
已提交查询: bq --project_id=...查询--目标表...
我正在试图对一个拥有大约1000万行的表运行一个查询。基本上,我试图运行Select * from events,然后将其写入CSV文件。我正在以AWS批处理进程的形式运行这个过程,并且该进程以错误的OutOfMemoryError: Container killed due to memory usage退出。