文章/答案/技术大牛

发布

社区首页 >问答首页 >PostgreSQL --为什么移动一个分区需要这么大的空间？

问PostgreSQL --为什么移动一个分区需要这么大的空间？
EN

Database Administration用户

提问于 2022-09-11 03:34:36

回答 1查看 50关注 0票数 0

我有一个postgres数据库，表空间分布在两个磁盘上。(一张用于当前数据的SSD磁盘，一台用于旧数据的磁力驱动器)

偶尔，我会使用.将包含“旧”数据的表分区移动到备份驱动器上的表空间。

ALTER TABLE..... SET TABLESPACE....

有时命令会在几分钟后失败，并发出空格警告。源表可能是(例如)30 on字节，该表所在的磁盘可能会降到它的最后5 G字节的空闲空间(根据窗口)，目标表空间可能有几百on的空闲空间。

问题

为什么源磁盘需要自由空间-即数据已经打开的磁盘？
有没有减少(或删除)对自由空间的需求？
是否需要计算允许SET TABLESPACE命令工作所需的空闲空间？

postgresql

postgresql-performance

回答 1

Database Administration用户

发布于 2022-09-11 07:08:55

除非您的wal_level设置为“最小”，否则当您将整个表移动到新的表空间时，必须将整个表写入WAL流。如果pg_wal位于与旧表空间相同的磁盘/分区上，这很容易使您耗尽空间。

票数 0

页面原文内容由Database Administration提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://dba.stackexchange.com/questions/316763

复制

视频中为什么需要这么多的颜色空间？

https 网络安全 html 云点播视频处理

点击上方“LiveVideoStack”关注我们 ▲扫描图中二维码或点击阅读原文▲ 了解音视频技术大会更多信息 ---- 作者：王伟编辑：Alex 图片来源：Unsplash (by Marques Kaspbrak) 在视频处理中，我们经常会用到不同的色彩空间：非线性 RGB、线性 RGB、YUV、XYZ……为什么需要这么多的色彩空间呢？为什么在FFmpeg中会有 color_space，color_transfer，color_primaries 等一系列的颜色属性呢？这些术语之间究竟隐藏着什

LiveVideoStack

2022/09/20

1K0

为什么大语言模型这么大？

内存文件系统镜像量化模型

AI模型主要由浮点数构成，通过分词器和嵌入模型等各种组件处理输入来运行。它们的大小从千兆字节到太字节不等，更大的参数数量可以提高性能和细微差别表示。但是，它们是如何变得如此庞大的呢？

云云众生s

2025/01/25

570

用户空间到内核空间为什么需要拷贝？

kernel linux

The simple answer to that is, "Kernel Developers do not put blind faith in anything". When any data is passed to the kernel space from userspace, it is the responsibility of the kernel developer to make sure that everything is sanitized. Just as you check for corner conditions in the functions, it is something similar for the kernel developers. Its a hygienic practice to use copy_from_user() to read the userspace data. We all know that there are all kinds of people in the world, and the same generalization applies to us coders. The kernel developers have to be everything to everyone. So, even if you are a clumsy coder who actually passed a pointer pointing to address in the kernel space by mistake, or if you are a malicious hacker who just wants to fool around and passed malformed data, the kernel should still handle that and not crash. The functions copy_from_user() does all these checks and more before it copies the data from the userspace to kernel space. Just to make sure that the kernel dev does not have to manually check all these conditions, does not accidentally miss out on any and to abstract it for future use and extendability, the kernel architects have made a simple function that everyone can use. It just adds uniformity to the code and makes things that bit robust, simpler and cleaner.

西湖醋鱼

2020/12/30

9440

Git目录为什么这么大

git 文件存储存储 node.js 编程算法

本文围绕git的目录过大，从git进行版本控制底层存储出发，简要分析Git目录过大的原因，以及如何处理

仙人技术

2021/08/31

1.3K0

为什么需要这么多编程语言？

php c 语言汇编语言 java python

学编程的过程中，总是有小伙伴纠结我到底是该学C语言呢？还是Python呢？或者学Java？

老九君

2020/04/08

1K0

微博的力量为什么这么大?

php

最近听闻「杨超越杯编程大赛」很是火热~ 网友纷纷评论，原来追星还可以这么硬核，没点实力还不敢追了。本期，小F通过爬取新浪微博评论，来看看大家对此次大赛有什么看法。在此之前，先查阅一下相关资料，发现从微博的手机端和移动端入手，效果还可以。网页版的微博，想都不用想，去了就是自讨苦吃。微博的反爬甚是厉害，我可不想去大动干戈... 虽然最后由于种种原因，还是没能够获取到完整的评论，不过也拿到了挺多数据。还是可以拿来一窥的。 / 01 / 网页分析网页端微博直接不看，先看一下手机端。网址为 https:

龙哥

2019/04/25

8490

操作系统，为什么需要内核空间和用户空间？

linux

本文以 32 位系统为例介绍内核空间(kernel space)和用户空间(user space)。

架构师修行之路

2020/11/03

4.2K0

为什么ToB产品需要这么多文档？

官方文档运维

大家都知道编写产品文档是PM的工作内容之一，对于ToC和ToB的产品来说，编写的产品文档也会存在一些差异性。

奔跑的小鹿

2021/09/28

7460

PostgreSQL中的大容量空间探索时间序列数据存储

存储数据库开源 postgresql sql

欧洲航天局科学数据中心（the European Space Agency Science Data Center，简称ESDC）利用TimescaleDB扩展切换到用PostgreSQL来存储他们的数据。ESDC的各种数据，包括结构化的、非结构化的和时间序列指标在内接近数百TB，还有使用开源工具查询跨数据集的需求。

星哥玩云

2022/08/17

2.6K0

Postgresql表空间

云服务器 postgresql 云数据仓库 PostgreSQL 云数据库 postgresql TDSQL PostgreSQL 版

不同的数据库表空间有不同的定义：在 postgres 中，表空间允许在文件系统中定义数据库对象存储的位置，实质上就是指定了一个目录。与数据库的关系在 postgres 中，一个表空间可以让多个数据库使用，而一个数据库也可以使用多个表空间，属于“多对多”的关系；在 oracle 中，一个表空间只属于一个数据库，而一个数据库可以使用多个表空间，属于“一对多”的关系。

DB之路

2021/07/06

1.8K0

PostgreSQL 分区表为什么要带 pg_pathman 过时了？

postgresql

PostgreSQL 如果使用较早的“大仙”们，在做分区的时候会提pg_pathman,为什么一个数据库使用分区表还要一个插件，可能习惯商业数据库的“人儿们”，不大理解。这点要从PG的分区表的来源来说， PG的分区表其实是PG的表继承概念的延伸。表继承允许planner只包含那些与查询兼容的子表(分区)。同时，用户在分区管理方面还有很多工作要做:创建继承的表，编写触发器来选择合适的分区进行行插入等。为了自动化这项工作，编写了pg_partman扩展。

AustinDatabases

2020/03/26

2.1K0

为什么MySQL内存占用这么大？ for InnoDB

缓存云数据库 SQL Server sql 数据库

这是 Innodb 引擎最重要的缓存，也是提升查询性能的重要手段。一般是global共享内存中占用最大的部分。在进行 SQL 读和写的操作时，首先并不是对物理数据文件操作，而是先对 buffer_pool 进行操作，然后再通过 checkpoint 等机制写回数据文件。占用的内存启动后就不会自动释放，默认通过LRU的算法镜像缓存淘汰，每次的新数据页，都会插入buffer pool的中间，防止前面的热数据被冲掉，长时间没动静的冷数据，会被淘汰出buffer pool，但是是被其它新数据占用了，所以一般这里不会释放的，除非重启（5.7 开始支持动态调整，默认以128M的chunk单位分配内存块）。innodb_buffer_pool主要包含数据页、索引页、undo 页、insert buffer、自适应哈希索引、锁信息以及数据字典等信息。

elontian田凌翔

2019/11/11

7.8K0

程序员鸭梨为什么这么大

网站 http

一：任务多，精神紧绷调研发现86%的程序员认为“近1～2 年压力越来越大”，还有一部分程序员表示“因为工作太多，情绪总处于紧绷状态，所以精神压力也非常大”。互联网兴起引发的软件项目的暴增以及软件开发周期的变短，这两种主要原因相互作用并最终导致了工作数量的增加。老板和产品人不停地拉回项目，可他们大多对软件开发知识缺乏专业的培训，他们不清楚开发软件的难易程度和需要的开发工期。结果，倒霉了干活的程序员。二：新技术频频爆发，没时间学习在科技

wangxl

2018/03/08

7750

简单的 HTTP 调用，为什么时延这么大？

http https 编程算法网络安全 apache

最近项目测试遇到个奇怪的现象，在测试环境通过 Apache HttpClient 调用后端的 HTTP 服务，平均耗时居然接近 39.2ms。可能你乍一看觉得这不是很正常吗，有什么好奇怪的？其实不然，我再来说下一些基本信息，该后端的 HTTP 服务并没有什么业务逻辑，只是将一段字符串转成大写然后返回，字符串长度也仅只有 100 字符，另外网络 ping 延时只有 1.9ms左右。因此，理论上该调用耗时应该在 2-3ms 左右，但为什么平均耗时 39.2ms 呢？

kirito-moe

2019/07/17

1.9K0

简单的 HTTP 调用，为什么时延这么大？

http https 编程算法网络安全 apache

最近项目测试遇到个奇怪的现象，在测试环境通过 Apache HttpClient 调用后端的 HTTP 服务，平均耗时居然接近 39.2ms。可能你乍一看觉得这不是很正常吗，有什么好奇怪的？其实不然，我再来说下一些基本信息，该后端的 HTTP 服务并没有什么业务逻辑，只是将一段字符串转成大写然后返回，字符串长度也仅只有 100 字符，另外网络 ping 延时只有 1.9ms 左右。因此，理论上该调用耗时应该在 2-3ms 左右，但为什么平均耗时 39.2ms 呢？

涤生

2019/07/17

1.3K0

Ubuntu 动态调整分区空间

linux ubuntu size sudo 磁盘

今天发现虚拟机磁盘满了报警了，明明 50 GiB 可以用很久，怎么会这么快满了呢，找了各种数据库日志文件等半天始终找不出不对劲的文件。

阿龙w

2023/10/18

4120

《PostgreSQL数据分区：原理与实战》

数据分区 postgresql 数据索引原理

Hey, 宝藏们！猫头虎又回来啦！🐯 最近，我发现很多小伙伴都在搜索“PostgreSQL 数据分区”，“PostgreSQL 分区优化”等关键词。数据分区是如何提高查询性能的神奇力量？让我们一起深入探索《PostgreSQL数据分区：原理与实战》吧！

猫头虎

2024/04/09

4280

为什么页面跟设计稿差距这么大

html5

在互联网产品的研发流程中，页面的视觉还原是很重要的一个步骤，也往往是问题最多的一个环节。如果一些细节问题在这个环节没有被有效地发现并解决，那么后续流程中再去解决这些问题的成本就会呈指数上升。

姬小光

2018/09/05

8220

PostgreSQL 自动创建分区最佳实践

postgresql 云数据仓库 PostgreSQL 云数据库 postgresql TDSQL PostgreSQL 版

分区表是 PostgreSQL 在 10 版本才具有的特性，实际使用中，用户往往需要做到提前创建分区或者按写入的数据实时创建分区。本文探讨常见的几种自动分区创建方案。

艾超_运成

2022/02/13

4.6K0

大模型相关技术-为什么需要rerank

腾讯技术创作特训营S6

在RAG（RetrievalAugmented Generation）中，embedding模型的向量检索可以帮助提高文本生成的效果，但仍然需要

西门呀在吹雪

2024/05/07

1.7K0

相似问题

为什么这个Server表占用这么大的空间

为什么WAL on postgresql需要这么长时间才能重放？

为什么mysqldump文件这么大？

为什么BCP创建这么大的文件？

分析差异备份，看看为什么它这么大。

添加站长进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例

问PostgreSQL --为什么移动一个分区需要这么大的空间？
EN