百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分析 > 正文

Postgresql物理目录结构 postgresql数据库

liebian365 2024-11-11 14:50 20 浏览 0 评论

1.1 数据目录布局

文件

描述

PG_VERSION

记录pg版本信息

pg_hba.conf

控制客户端认证

pg_ident.conf

控制用户名映射

postgresql.conf

配置参数文件

postgresql.auto.conf

存储ALTER SYSTEM命令设置的参数(versions 9.4+)

postmaster.opts

记录最后启动时的命令行参数

子目录

描述

base/

包含预定义和自建的数据库

global/

存放集群范围内的表,例如pg_database和pg_control

pg_commit_ts/

包含事务提交时间戳数据(versions 9.5+)

pg_clog/ (versions 9.6+)

包含事务提交状态的数据。version 10重命名为pg_xact

pg_dynshmem/

包含动态共享内存子系统使用的文件(versions 9.4+)

pg_logical/

包含逻辑解码的状态数据(versions 9.4+)

pg_multixact/

包含多事务状态数据(用于共享行锁)

pg_notify/

包含监听和通知状态数据

pg_repslot/

包含复制槽数据(versions 9.4+)

pg_serial/

串行提交的事务信息(versions 9.1+)

pg_snapshots/

存放export的快照,函数pg_export_snapshot创建的快照存放于此目录(versions 9.2+)

pg_stat/

持久化的统计信息数据

pg_stat_tmp/

临时的统计信息数据

pg_subtrans/

子事务状态

pg_tblspc/

包含自定义表空间的软链接

pg_twophase/

包含prepared事务的状态

pg_wal/ (versions 10+)

存放wal日志,10之前为pg_xlog

pg_xact/ (versions 10+)

事务提交状态信息

pg_xlog/ (versions 9.6+)

存放wal日志

1.2 数据库、表目录定位

可以查询pg_database表获取数据库的oid,数据库对应的目录为$PGDATA/base/oid

mydb=# \l
                                  List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+-----------------------
 mydb      | myq      | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
(4 rows)

mydb=# select oid,datname from pg_database where datname='mydb';
  oid  | datname 
-------+---------
 16385 | mydb
(1 row)

mydb=# \! ls $PGDATA/base/
1  13891  13892  16385	pgsql_tmp

通过pg_class视图查询表的oid,然后通过函数pg_relation_filepath()获取表的数据文件路径。

mydb=# \dt
         List of relations
 Schema |   Name    | Type  | Owner 
--------+-----------+-------+-------
 myq    | employees | table | myq
 myq    | emps      | table | myq
 myq    | t         | table | myq
(3 rows)

mydb=# select oid,relname from pg_class where relname='emps';
  oid  | relname 
-------+---------
 16444 | emps
(1 row)

mydb=# select pg_relation_filepath(16444);
 pg_relation_filepath 
----------------------
 base/16385/16444
(1 row)

mydb=# \! ls $PGDATA/base/16385/16444*
/var/postgres/data/base/16385/16444  /var/postgres/data/base/16385/16444_fsm  /var/postgres/data/base/16385/16444_vm

当执行某些操作时,如truncate、reindex等时,文件的relfilenode会改变,oid不变。

mydb=# select oid,relname,relfilenode from pg_class where relname='t';
  oid  | relname | relfilenode 
-------+---------+-------------
 16448 | t       |       16462
(1 row)

mydb=# truncate table t;
TRUNCATE TABLE
mydb=# select oid,relname,relfilenode from pg_class where relname='t';
  oid  | relname | relfilenode 
-------+---------+-------------
 16448 | t       |       16466
(1 row)

1.3. 表和数据文件

每个表都对应着操作系统上的一个或多个数据文件。当表的数据文件增长到1GB时,会自动分割,创建一个新的数据文件,类似于12345,12345.1,12345.2等等。

可以在编译pg时通过参数./configure --with-segsize指定数据文件分割的阈值。

每个表除了数据文件外,还有两个相关的文件fsm和vm。

  • fsm文件 用于跟踪可用的数据页,快速查找可用于插入数据的页。只有vacuum操作后才会有。
  • vm文件 可以快速判断一个页是否需要vacuum或frozen。不适用于索引页。被vm跟踪的页在vacuum时会被跳过。
  • 索引页只有fsm文件,没有vm文件。

1.4. 自定义表空间

位于自定义表空间的对象存储于自定义表空间目录,会在$PGDATA/pg_tblspc目录创建一个名为表空间oid的软连接,软连接指向了表空间所在目录。 自定义表空间的目录结构为PG_版本_创建时间/数据库oid/数据文件

#自定义表空间myqtbs位于目录/var/postgres/myqtbs
postgres=# \db+
                                        List of tablespaces
    Name    |  Owner   |       Location       | Access privileges | Options |  Size   | Description 
------------+----------+----------------------+-------------------+---------+---------+-------------
 myqtbs     | myq      | /var/postgres/myqtbs |                   |         | 0 bytes | 
 pg_default | postgres |                      |                   |         | 41 MB   | 
 pg_global  | postgres |                      |                   |         | 560 kB  | 
(3 rows)

#数据库db2位于表空间myqtbs
db2=# \l+
                                                                    List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   |  Size   | Tablespace |                Description                 
-----------+----------+----------+-------------+-------------+-----------------------+---------+------------+--------------------------------------------
 db2       | myq      | UTF8     | en_US.UTF-8 | en_US.UTF-8 |                       | 8553 kB | myqtbs     | 
 mydb      | myq      | UTF8     | en_US.UTF-8 | en_US.UTF-8 |                       | 8761 kB | pg_default | 
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 |                       | 8561 kB | pg_default | default administrative connection database
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +| 8385 kB | pg_default | unmodifiable empty database
           |          |          |             |             | postgres=CTc/postgres |         |            | 
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +| 8385 kB | pg_default | default template for new databases
           |          |          |             |             | postgres=CTc/postgres |         |            | 
(5 rows)

#数据库db2的oid为24623
db2=# select oid,datname from pg_database;
  oid  |  datname  
-------+-----------
 13892 | postgres
 16385 | mydb
     1 | template1
 13891 | template0
 24623 | db2
(5 rows)


#$PGDATA/pg_tblspc下以表空间oid命名
[postgres@pg14-7 myqtbs]$ tree $PGDATA/pg_tblspc
/var/postgres/data/pg_tblspc
└── 24625 -> /var/postgres/myqtbs

#表空间目录以数据库oid为目录组织文件
[postgres@pg14-7 myqtbs]$ tree -L 2 /var/postgres/myqtbs/
/var/postgres/myqtbs/
└── PG_14_202107181
    └── 24623

相关推荐

4万多吨豪华游轮遇险 竟是因为这个原因……

(观察者网讯)4.7万吨豪华游轮搁浅,竟是因为油量太低?据观察者网此前报道,挪威游轮“维京天空”号上周六(23日)在挪威近海发生引擎故障搁浅。船上载有1300多人,其中28人受伤住院。经过数天的调...

“菜鸟黑客”必用兵器之“渗透测试篇二”

"菜鸟黑客"必用兵器之"渗透测试篇二"上篇文章主要针对伙伴们对"渗透测试"应该如何学习?"渗透测试"的基本流程?本篇文章继续上次的分享,接着介绍一下黑客们常用的渗透测试工具有哪些?以及用实验环境让大家...

科幻春晚丨《震动羽翼说“Hello”》两万年星间飞行,探测器对地球的最终告白

作者|藤井太洋译者|祝力新【编者按】2021年科幻春晚的最后一篇小说,来自大家喜爱的日本科幻作家藤井太洋。小说将视角放在一颗太空探测器上,延续了他一贯的浪漫风格。...

麦子陪你做作业(二):KEGG通路数据库的正确打开姿势

作者:麦子KEGG是通路数据库中最庞大的,涵盖基因组网络信息,主要注释基因的功能和调控关系。当我们选到了合适的候选分子,单变量研究也已做完,接着研究机制的时便可使用到它。你需要了解你的分子目前已有哪些...

知存科技王绍迪:突破存储墙瓶颈,详解存算一体架构优势

智东西(公众号:zhidxcom)编辑|韦世玮智东西6月5日消息,近日,在落幕不久的GTIC2021嵌入式AI创新峰会上,知存科技CEO王绍迪博士以《存算一体AI芯片:AIoT设备的算力新选择》...

每日新闻播报(September 14)_每日新闻播报英文

AnOscarstatuestandscoveredwithplasticduringpreparationsleadinguptothe87thAcademyAward...

香港新巴城巴开放实时到站数据 供科技界研发使用

中新网3月22日电据香港《明报》报道,香港特区政府致力推动智慧城市,鼓励公私营机构开放数据,以便科技界研发使用。香港运输署21日与新巴及城巴(两巴)公司签署谅解备忘录,两巴将于2019年第3季度,开...

5款不容错过的APP: Red Bull Alert,Flipagram,WifiMapper

本周有不少非常出色的app推出,鸵鸟电台做了一个小合集。亮相本周榜单的有WifiMapper's安卓版的app,其中包含了RedBull的一款新型闹钟,还有一款可爱的怪物主题益智游戏。一起来看看我...

Qt动画效果展示_qt显示图片

今天在这篇博文中,主要实践Qt动画,做一个实例来讲解Qt动画使用,其界面如下图所示(由于没有录制为gif动画图片,所以请各位下载查看效果):该程序使用应用程序单窗口,主窗口继承于QMainWindow...

如何从0到1设计实现一门自己的脚本语言

作者:dong...

三年级语文上册 仿写句子 需要的直接下载打印吧

描写秋天的好句好段1.秋天来了,山野变成了美丽的图画。苹果露出红红的脸庞,梨树挂起金黄的灯笼,高粱举起了燃烧的火把。大雁在天空一会儿写“人”字,一会儿写“一”字。2.花园里,菊花争奇斗艳,红的似火,粉...

C++|那些一看就很简洁、优雅、经典的小代码段

目录0等概率随机洗牌:1大小写转换2字符串复制...

二年级上册语文必考句子仿写,家长打印,孩子照着练

二年级上册语文必考句子仿写,家长打印,孩子照着练。具体如下:...

一年级语文上 句子专项练习(可打印)

...

亲自上阵!C++ 大佬深度“剧透”:C++26 将如何在代码生成上对抗 Rust?

...

取消回复欢迎 发表评论: