百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分析 > 正文

「揭秘GP」Greenplum 6 软件包目录畅游(下)

liebian365 2024-10-31 15:20 6 浏览 0 评论


该篇文章为目录畅游的结束篇,系列文章请参阅文章《「揭秘GP」Greenplum 6 软件包目录畅游(上)》 和《「揭秘GP」Greenplum 6 软件包目录畅游(中)》 。

上篇文章带大家看完了 include 目录,本篇接着介绍剩余的内容。首先还是先来看一下软件包下面的所有目录情况。

[gpadmin@gp1 greenplum-db]$ ls -al
总用量 160
drwxr-xr-x  11 root root    187 12月 17 11:24 .
drwxr-xr-x. 14 root root    187 12月 17 11:24 ..
drwxr-xr-x   7 root root   4096 12月 17 11:24 bin
drwxr-xr-x   3 root root     22 12月 17 11:24 docs
drwxr-xr-x   2 root root     60 12月 17 11:24 etc
drwxr-xr-x   3 root root     20 12月 17 11:24 ext
-rwxr-xr-x   1 root root    783 12月 17 11:24 greenplum_path.sh
drwxr-xr-x   4 root root   4096 12月 17 11:24 include
drwxr-xr-x   6 root root   4096 12月 17 11:24 lib
-rw-r--r--   1 root root 135617 12月 13 02:57 open_source_license_pivotal_greenplum.txt
drwxr-xr-x   7 root root     93 12月 17 11:24 pxf
drwxr-xr-x   2 root root   4096 12月 17 11:24 sbin
drwxr-xr-x   5 root root     52 12月 17 11:24 share

目前剩余的目录还有 lib 目录、pxf 目录、sbin 目录和 share 目录。

lib 目录

该目录下主要存的是动态链接库,程序运行过程中会动态将这些库文件加载。另外有一些别的内容,可以到目录下简单看一下。

-rwxr-xr-x  1 root root   662274 12月 13 02:57 libecpg.a
-rwxr-xr-x  1 root root    75844 12月 13 02:57 libecpg_compat.a
lrwxrwxrwx  1 root root       21 12月 17 11:24 libecpg_compat.so -> libecpg_compat.so.3.6
lrwxrwxrwx  1 root root       21 12月 17 11:24 libecpg_compat.so.3 -> libecpg_compat.so.3.6
-rwxr-xr-x  1 root root    64464 12月 13 02:57 libecpg_compat.so.3.6
lrwxrwxrwx  1 root root       14 12月 17 11:24 libecpg.so -> libecpg.so.6.6
lrwxrwxrwx  1 root root       14 12月 17 11:24 libecpg.so.6 -> libecpg.so.6.6
-rwxr-xr-x  1 root root   361496 12月 13 02:57 libecpg.so.6.6
lrwxrwxrwx  1 root root       16 12月 17 11:24 libgpdbcost.so -> libgpdbcost.so.3
lrwxrwxrwx  1 root root       21 12月 17 11:24 libgpdbcost.so.3 -> libgpdbcost.so.3.85.0
-rwxr-xr-x  1 root root  1122528 12月 13 02:57 libgpdbcost.so.3.85.0
lrwxrwxrwx  1 root root       13 12月 17 11:24 libgpopt.so -> libgpopt.so.3
lrwxrwxrwx  1 root root       18 12月 17 11:24 libgpopt.so.3 -> libgpopt.so.3.85.0
-rwxr-xr-x  1 root root 50101096 12月 13 02:57 libgpopt.so.3.85.0
lrwxrwxrwx  1 root root       12 12月 17 11:24 libgpos.so -> libgpos.so.3
lrwxrwxrwx  1 root root       17 12月 17 11:24 libgpos.so.3 -> libgpos.so.3.85.0
-rwxr-xr-x  1 root root  1988592 12月 13 02:57 libgpos.so.3.85.0
-rwxr-xr-x  1 root root   259280 12月 13 02:57 libgppc.a
lrwxrwxrwx  1 root root       14 12月 17 11:24 libgppc.so -> libgppc.so.1.2
lrwxrwxrwx  1 root root       14 12月 17 11:24 libgppc.so.1 -> libgppc.so.1.2
-rwxr-xr-x  1 root root   149680 12月 13 02:57 libgppc.so.1.2
...............
...............
...............

lib/gpperfmon 目录

该目录下有 gpperfmon(gpcc用的监控库)模式初始化文件 gpperfmon.sql,该 sql 文件可以用来在 gpperfmon 中创建对应的内外表。具体内容自己可以打开看看,可以根据模式的内容构造一个自己的 gpcc。

lib/pkgconfig 目录

源码编译用的一些文件,在编译和链接库文件时,通过这些 .pc 文件来指定文件的位置、版本号、编译选项等信息。

[gpadmin@gp1 pkgconfig]$ cat libzstd.pc
#   ZSTD - standard compression algorithm
#   Copyright (C) 2014-2016, Yann Collet, Facebook
#   BSD 2-Clause License (http://www.opensource.org/licenses/bsd-license.php)

prefix=/usr
libdir=/usr/lib64
includedir=/usr/include

Name: zstd
Description: fast lossless compression algorithm library
URL: http://www.zstd.net/
Version: 1.3.7
Libs: -L${libdir} -lzstd
Cflags: -I${includedir}

lib/postgresql 目录

由于 Greenplum 是基于 PostgreSQL 内核开发的,所以一些 Postgresql 的动态链接库放在该目录下。

[gpadmin@gp1 postgresql]$ ls -al
总用量 41768
drwxr-xr-x 3 root root     4096 12月 17 11:24 .
drwxr-xr-x 6 root root     4096 12月 17 11:24 ..
-rwxr-xr-x 1 root root    19920 12月 13 02:57 ascii_and_mic.so
-rwxr-xr-x 1 root root    97376 12月 13 02:57 auto_explain.so
-rwxr-xr-x 1 root root    54600 12月 13 02:57 citext.so
-rwxr-xr-x 1 root root    49528 12月 13 02:57 cyrillic_and_mic.so
-rwxr-xr-x 1 root root   245704 12月 13 02:57 dblink.so
-rwxr-xr-x 1 root root  1267072 12月 13 02:57 dict_snowball.so
-rwxr-xr-x 1 root root   404864 12月 13 02:57 diskquota.so
-rwxr-xr-x 1 root root    29880 12月 13 02:57 euc2004_sjis2004.so
-rwxr-xr-x 1 root root    21728 12月 13 02:57 euc_cn_and_mic.so
-rwxr-xr-x 1 root root    40496 12月 13 02:57 euc_jp_and_sjis.so
-rwxr-xr-x 1 root root    21720 12月 13 02:57 euc_kr_and_mic.so
-rwxr-xr-x 1 root root    40536 12月 13 02:57 euc_tw_and_big5.so
-rwxr-xr-x 1 root root   109176 12月 13 02:57 fixedwidth.so
-rwxr-xr-x 1 root root   185416 12月 13 02:57 fuzzystrmatch.so
-rwxr-xr-x 1 root root    82288 12月 13 02:57 gp_ao_co_diagnostics.so
-rwxr-xr-x 1 root root  7464944 12月 13 02:57 gpcloud.so
-rwxr-xr-x 1 root root    85288 12月 13 02:57 gp_distribution_policy.so
-rwxr-xr-x 1 root root    77768 12月 13 02:57 gpextprotocol.so
-rwxr-xr-x 1 root root   611544 12月 13 02:57 gpfmt_avro.so
-rwxr-xr-x 1 root root   113624 12月 13 02:57 gpfmt_binary.so
-rwxr-xr-x 1 root root   474792 12月 13 02:57 gpfmt_confluent_avro.so
-rwxr-xr-x 1 root root   110680 12月 13 02:57 gpfmt_delimiter.so
-rwxr-xr-x 1 root root   108192 12月 13 02:57 gpfmt_json.so
-rwxr-xr-x 1 root root   749016 12月 13 02:57 gpfmt_kafka.so
-rwxr-xr-x 1 root root 17311712 12月 13 02:57 gpfmt_protobuf.so
-rwxr-xr-x 1 root root    82088 12月 13 02:57 gpformatter.so
............
............
............

从上面的具体库文件命名也可以看出,有一部分 greenplum 的动态链接库也是放在这里面的,具体原因我也不知道,等咨询官方开发大神再给大家更新。

lib/python 目录

该目录下放的是 python 用到的库文件,例如:yaml、pygresql,这里面比较重要的一个就是 pygresql,这是 python 语言访问 postgresql 系数据库的三方接口库,现在用的比较多的具有相同作用的库还有 psycopg2,当然这里选用的是 pygresql。

gpadmin@gp1 python]$ ls -al
总用量 220
drwxr-xr-x  7 root root   222 12月 17 11:24 .
drwxr-xr-x  6 root root  4096 12月 17 11:24 ..
drwxr-xr-x 10 root root  4096 12月 17 11:24 gppylib
-rwxr-xr-x  1 root root     0 12月 13 02:57 __init__.py
-rwxr-xr-x  1 root root   111 12月 13 02:57 __init__.pyc
drwxr-xr-x  2 root root    90 12月 17 11:24 lockfile
-rwxr-xr-x  1 root root 69992 12月 13 02:57 _posixsubprocess.so
drwxr-xr-x  3 root root  4096 12月 17 11:24 psutil
drwxr-xr-x  2 root root   117 12月 17 11:24 pygresql
-rwxr-xr-x  1 root root  3758 12月 13 02:57 subprocess32-ChangeLog
-rwxr-xr-x  1 root root 74362 12月 13 02:57 subprocess32.py
-rwxr-xr-x  1 root root 48477 12月 13 02:57 subprocess32.pyc
drwxr-xr-x  2 root root  4096 12月 17 11:24 yaml

sbin 目录

该目录下存储的文件主要为 bin 目录下的一些集群管理工具的内部命令,这些 python 脚本不能直接调用,而只能通过 bin 目录下对应的脚本自行调用。该目录在使用过程中对用户是不可见的,程序会自动去调用,可以忽略。但是如果有源码修改需求,这部分下的脚本文件也不要忘掉哦。

[gpadmin@gp1 greenplum-db]$ ls -al sbin
总用量 128
drwxr-xr-x  2 root root  4096 12月 17 11:24 .
drwxr-xr-x 11 root root   187 12月 17 11:24 ..
-rwxr-xr-x  1 root root  2808 12月 13 02:57 gpcleansegmentdir.py
-rwxr-xr-x  1 root root  3303 12月 13 02:57 gpcleansegmentdir.pyc
-rwxr-xr-x  1 root root  6541 12月 13 02:57 gpconfig_helper.py
-rwxr-xr-x  1 root root  5648 12月 13 02:57 gpconfig_helper.pyc
-rwxr-xr-x  1 root root  9089 12月 13 02:57 gpgetstatususingtransition.py
-rwxr-xr-x  1 root root  8302 12月 13 02:57 gpgetstatususingtransition.pyc
-rwxr-xr-x  1 root root  1338 12月 13 02:57 gpmon_catqrynow.py
-rwxr-xr-x  1 root root  1186 12月 13 02:57 gpmon_catqrynow.pyc
-rwxr-xr-x  1 root root  1937 12月 13 02:57 gpoperation.py
-rwxr-xr-x  1 root root  1565 12月 13 02:57 gpoperation.pyc
-rwxr-xr-x  1 root root 14843 12月 13 02:57 gpsegstart.py
-rwxr-xr-x  1 root root 12309 12月 13 02:57 gpsegstart.pyc
-rwxr-xr-x  1 root root  8247 12月 13 02:57 gpsegstop.py
-rwxr-xr-x  1 root root  7641 12月 13 02:57 gpsegstop.pyc
-rwxr-xr-x  1 root root  7797 12月 13 02:57 packcore

share 目录

这是最后一个目录,也是一个比较重要的目录,该目录中最重要的一个要数 postgresql 这个子目录。

[gpadmin@gp1 greenplum-db]$ ls -al share
drwxr-xr-x  3 root root   24 12月 17 11:24 doc
drwxr-xr-x  2 root root   41 12月 17 11:24 greenplum
drwxr-xr-x  8 root root 4096 12月 17 11:24 postgresql

share/doc目录

目前该目录下只存了 orafce 扩展的一些文档性信息。可以自行 cat 打开来看。

[gpadmin@gp1 greenplum-db]$ ls -al share/doc/postgresql/extension/
总用量 40
drwxr-xr-x 2 root root    75 12月 17 11:24 .
drwxr-xr-x 3 root root    23 12月 17 11:24 ..
-rwxr-xr-x 1 root root   987 12月 13 02:57 COPYRIGHT.orafce
-rwxr-xr-x 1 root root   874 12月 13 02:57 INSTALL.orafce
-rwxr-xr-x 1 root root 31364 12月 13 02:57 README.asciidoc

share/postgresql/extension 目录

该目录下放了很多创建扩展用到的 control 文件和 sql 文件,比较著名的有:citext、dblink、hstore、orafce、存储过程语言扩展、pxf 等等,可以说我们在 Greenplum 数据库中执行创建扩展语句 CREATE Extention xxxx 时,它会从这个目录下寻找对应的 control 文件并执行对应的 SQL,在数据库中创建对应的函数、类型等内容。

[gpadmin@gp1 greenplum-db]$ ls -al share/postgresql/extension/
总用量 432
drwxr-xr-x 2 root root  4096 12月 17 11:24 .
drwxr-xr-x 8 root root  4096 12月 17 11:24 ..
-rwxr-xr-x 1 root root  1028 12月 13 02:57 citext--1.0--1.1.sql
-rwxr-xr-x 1 root root 12337 12月 13 02:57 citext--1.0.sql
-rwxr-xr-x 1 root root  1001 12月 13 02:57 citext--1.1--1.0.sql
-rwxr-xr-x 1 root root 12364 12月 13 02:57 citext--1.1.sql
-rwxr-xr-x 1 root root   158 12月 13 02:57 citext.control
-rwxr-xr-x 1 root root  9839 12月 13 02:57 citext--unpackaged--1.0.sql
-rwxr-xr-x 1 root root   419 12月 13 02:57 dblink--1.0--1.1.sql
-rwxr-xr-x 1 root root  5936 12月 13 02:57 dblink--1.1.sql
-rwxr-xr-x 1 root root   170 12月 13 02:57 dblink.control
-rwxr-xr-x 1 root root  2863 12月 13 02:57 dblink--unpackaged--1.0.sql
-rw-r--r-- 1 root root  2674 12月 13 02:57 diskquota--1.0.sql
-rw-r--r-- 1 root root   139 12月 13 02:57 diskquota.control
-rwxr-xr-x 1 root root  1436 12月 13 02:57 fuzzystrmatch--1.0.sql
-rwxr-xr-x 1 root root   175 12月 13 02:57 fuzzystrmatch.control
-rwxr-xr-x 1 root root  1108 12月 13 02:57 fuzzystrmatch--unpackaged--1.0
................
................
................

pxf 目录

在 GPDB 4.x 的时代,我们连接 Hadoop 系是通过 gphdfs 来实现的,但是这种方式的可用性和可扩展性并不强。所以从 GPDB 5.x 开始,GPDB 从 HAWQ( HAWQ 是 Pivotal 开源的另一款软件,一款底层存储基于 HDFS,前端引擎基于 GPDB,支持大规模并行处理的软件 )中吸收了 pxf 框架。该框架通过扩展的形式在 GPDB 中创建,它能够使 GPDB 以并行的方式从 HDFS、Hbase、Hive 或其他存储中查询数据,pxf 在目标侧通过 Java 语言与 Hadoop 系进行交互,而在 GPDB 侧则通过 C 做底层交互,打通 GPDB 与 Hadoop 数据的任督二脉。使用方面只需要在创建外部表时指定协议为 pxf 即可。

[gpadmin@gp1 pxf]$ ls -al
总用量 4
drwxr-xr-x  7 root root  93 12月 17 11:24 .
drwxr-xr-x 11 root root 187 12月 17 11:24 ..
drwxr-xr-x  9 root root 220 12月 17 11:24 apache-tomcat
drwxr-xr-x  2 root root  32 12月 17 11:24 bin
drwxr-xr-x  2 root root  64 12月 17 11:24 conf
drwxr-xr-x  3 root root 252 12月 17 11:24 lib
drwxr-xr-x  5 root root  43 12月 17 11:24 templates
-rw-r--r--  1 root root   7 12月 13 02:57 version

这里不展开给大家详细介绍 pxf 的每个子目录的作用了,后面在 pxf 的详细使用介绍文章中再具体说明。

Greenplum 6 软件包目录畅游部分到此结束~欢迎各位朋友拍砖~

相关推荐

快递查询教程,批量查询物流,一键管理快递

作为商家,每天需要查询许许多多的快递单号,面对不同的快递公司,有没有简单一点的物流查询方法呢?小编的回答当然是有的,下面随小编一起来试试这个新技巧。需要哪些工具?安装一个快递批量查询高手快递单号怎么快...

一键自动查询所有快递的物流信息 支持圆通、韵达等多家快递

对于各位商家来说拥有一个好的快递软件,能够有效的提高自己的工作效率,在管理快递单号的时候都需要对单号进行表格整理,那怎么样能够快速的查询所有单号信息,并自动生成表格呢?1、其实方法很简单,我们不需要一...

快递查询单号查询,怎么查物流到哪了

输入单号怎么查快递到哪里去了呢?今天小编给大家分享一个新的技巧,它支持多家快递,一次能查询多个单号物流,还可对查询到的物流进行分析、筛选以及导出,下面一起来试试。需要哪些工具?安装一个快递批量查询高手...

3分钟查询物流,教你一键批量查询全部物流信息

很多朋友在问,如何在短时间内把单号的物流信息查询出来,查询完成后筛选已签收件、筛选未签收件,今天小编就分享一款物流查询神器,感兴趣的朋友接着往下看。第一步,运行【快递批量查询高手】在主界面中点击【添...

快递单号查询,一次性查询全部物流信息

现在各种快递的查询方式,各有各的好,各有各的劣,总的来说,还是有比较方便的。今天小编就给大家分享一个新的技巧,支持多家快递,一次能查询多个单号的物流,还能对查询到的物流进行分析、筛选以及导出,下面一起...

快递查询工具,批量查询多个快递快递单号的物流状态、签收时间

最近有朋友在问,怎么快速查询单号的物流信息呢?除了官网,还有没有更简单的方法呢?小编的回答当然是有的,下面一起来看看。需要哪些工具?安装一个快递批量查询高手多个京东的快递单号怎么快速查询?进入快递批量...

快递查询软件,自动识别查询快递单号查询方法

当你拥有多个快递单号的时候,该如何快速查询物流信息?比如单号没有快递公司时,又该如何自动识别再去查询呢?不知道如何操作的宝贝们,下面随小编一起来试试。需要哪些工具?安装一个快递批量查询高手快递单号若干...

教你怎样查询快递查询单号并保存物流信息

商家发货,快递揽收后,一般会直接手动复制到官网上一个个查询物流,那么久而久之,就会觉得查询变得特别繁琐,今天小编给大家分享一个新的技巧,下面一起来试试。教程之前,我们来预览一下用快递批量查询高手...

简单几步骤查询所有快递物流信息

在高峰期订单量大的时候,可能需要一双手当十双手去查询快递物流,但是由于逐一去查询,效率极低,追踪困难。那么今天小编给大家分享一个新的技巧,一次能查询多个快递单号的物流,下面一起来学习一下,希望能给大家...

物流单号查询,如何查询快递信息,按最后更新时间搜索需要的单号

最近有很多朋友在问,如何通过快递单号查询物流信息,并按最后更新时间搜索出需要的单号呢?下面随小编一起来试试吧。需要哪些工具?安装一个快递批量查询高手快递单号若干怎么快速查询?运行【快递批量查询高手】...

连续保存新单号功能解析,导入单号查询并自动识别批量查快递信息

快递查询已经成为我们日常生活中不可或缺的一部分。然而,面对海量的快递单号,如何高效、准确地查询每一个快递的物流信息,成为了许多人头疼的问题。幸运的是,随着科技的进步,一款名为“快递批量查询高手”的软件...

快递查询教程,快递单号查询,筛选更新量为1的单号

最近有很多朋友在问,怎么快速查询快递单号的物流,并筛选出更新量为1的单号呢?今天小编给大家分享一个新方法,一起来试试吧。需要哪些工具?安装一个快递批量查询高手多个快递单号怎么快速查询?运行【快递批量查...

掌握批量查询快递动态的技巧,一键查找无信息记录的两种方法解析

在快节奏的商业环境中,高效的物流查询是确保业务顺畅运行的关键。作为快递查询达人,我深知时间的宝贵,因此,今天我将向大家介绍一款强大的工具——快递批量查询高手软件。这款软件能够帮助你批量查询快递动态,一...

从复杂到简单的单号查询,一键清除单号中的符号并批量查快递信息

在繁忙的商务与日常生活中,快递查询已成为不可或缺的一环。然而,面对海量的单号,逐一查询不仅耗时费力,还容易出错。现在,有了快递批量查询高手软件,一切变得简单明了。只需一键,即可搞定单号查询,一键处理单...

物流单号查询,在哪里查询快递

如果在快递单号多的情况,你还在一个个复制粘贴到官网上手动查询,是一件非常麻烦的事情。于是乎今天小编给大家分享一个新的技巧,下面一起来试试。需要哪些工具?安装一个快递批量查询高手快递单号怎么快速查询?...

取消回复欢迎 发表评论: