在将数据写入BigQuery表时,在写入表之前,数据会被缓冲到所选存储桶中的临时区域中。随着写操作并发性的增加,这种临时存储的性能变得非常重要。可以执行什么优化来提高这种缓冲区写入性能?例如,固态硬盘可以用于临时存储吗?
谢谢
发布于 2021-03-08 21:05:07
谢谢。数据通过Spark结构流写入,源为Kafka,宿为BigQuery。
无论如何,我认为唯一可行的替代方案是为不同的应用程序使用多个临时存储空间?
https://stackoverflow.com/questions/66514925
复制相似问题