GreenPlum_常用数据库命令

1、greenplum 日常简明维护手册1. 数据库启动：gpstart常用参数： -a : 直接启动，不提示终端用户输入确认-m:只启动 master 实例，主要在故障处理时使用访问单个数据实例：pgoptions=”-c gp_session_role=utility”psql template1 -p5432启动某个segment instance ： pg_ctlstop/start-d/datadir/取端口号：select* from gp_segment_configuration启动以后会在/tmp/ 下生成一个.lock 隐蔽文件，记录主进程号。2. 数据库停止：gpstop：常

2、用可选参数：-a：直接停止，不提示终端用户输入确认-m：只停止 master 实例，与 gpstart m 对应使用-f：停止数据库，中断全部数据库连接，回滚正在运行的事务-u：不停止数据库，只加载 pg_hba.conf 和 postgresql.conf 中运行时参数，当改动参数配置时候使用。连接数，重启3. 查看实例配置和状态select * from gp_segment_configurationorder by content ; select * frompg_filespace_entry ;主要字段说明：content：该字段相等的两个实例，是一对（primary insta

3、nce）和（mirror instance)isprimary：实例是否作为 primary instance 运行valid：实例是否有效，如处于 false 状态，则说明该实例已经 down 掉。port：实例运行的端口datadir:实例对应的数据名目4. gpstate ：显示 greenplum 数据库运行状态，具体配置等信息常用可选参数：-c：primary instance 和 mirror instance 的对应关系-m：只列出 mirror 实例的状态和配置信息-f：显示 standby master 的具体信息该命令默认列出数据库运行状态汇总信息，常用于日常巡检。5. 查

4、看用户会话和提交的查询等信息select * from pg_stat_activity该表能查看到当前数据库连接的 ip 地址，用户名，提交的查询等。另外也可以在 master 主机上查看进程，对每个客户端连接，master 都会创建一个进程。ps -ef |grep -i postgres |grep -i con杀进程：linux： kill -11pidsql ： pg_cancel_backend（pid）ps ef |grep i postgre |grep i con6. 查看数据库、表占用空间查询表大小:select pg_size_pretty(pg_relation_siz

5、e(”schema.tablename”);例: select pg_size_pretty(pg_relation_size(”iidp_code.cf_load_state”);表和索引select pg_size_pretty(pg_total_relation_size(”iidp_code.cf_load_state ”);查询数据库大小select pg_size_pretty(pg_database_size(”databasename”);例:select pg_size_pretty(pg_database_size(”bddj_s_t”);-单个库select datnam

6、e,pg_size_pretty(pg_database_size(datname) from pg_database; -所有库分区表：select *from pg_partitionswhere查某个schema 占用的空间：selectpg_size_pretty(pg_relation_size(tablename)from pg_tablestinner join pg_namespaced on t.schemaname=d.nspnamegroup by d.nspname必需在数据库所对应的存储系统里，至少保留30%的自由空间，日常巡检，要检查存储空间的剩余容量。7. 收集统

7、计信息，回收空间定期使用vacuum analyze tablename 回收垃圾和收集统计信息，尤其在大数据量删除，导入以后，格外重要将 delete 或 update 的“旧”数据放到 rollback segment，与表分开存放。并发事务为了保证数据全都性，需要从 rollback segment 上恢复数据。greenplum：“旧数据”与表存放在一起，对旧的数据做了标志。并发事务通过transaction id（xid）推断数据是否可用系统表也是需要进行vacuum：#!/bin/bashdbname=“databasename“ vcommand=“vacuum analyze“

8、 #vcommand=“vacuum full analyze“psql -tc “select ”$vcommand” | ” pg_catalog.” | relname | ”;” from pg_class a,pg_namespace b where a.relnamespace=b.oid and b.nspname= ”pg_catalog” and a.relkind=”r”“ $dbname|psql -a $dbname长期没有vaccum 的大表，使用重建表/drop 表的方式，消退垃圾空间。alter table xxx rename to yyyy.8. 查看数据分布

9、状况两种方式：select gp_segment_id,count(*) fromtablenamegroup by 1 ;如数据分布不均匀，将发挥不了并行计算的优势，严峻影响性能。查看磁盘分布select dfhostname, dfspace,dfdevice from gp_toolkit.gp_disk_free order by dfhostname9. 实例恢复：gprecoverseg通过gpstate 或gp_segment_configuration 发觉有实例down 掉以后，使用该命令进行回复,恢复时候不需要停机，不影响应用10. 查看锁信息：select locktyp

10、e, database, c.relname, l.relation, l.transactionid, l.transaction, l.pid, l.mode, l.granted, a.current_queryfrom pg_locks l, pg_class c, pg_stat_activity a where l.relation=c.oid and l.pid=cpidorder by c.relname;主要字段说明：relname: 表名locktype、mode 标识了锁的类型mvcc: 读写相互不影响 select/ insert update delete避

11、开死锁： delete 和 update 是 表级排他exclusive锁。11. 数据库备份 gp_dump, pg_dump常用参数：-s: 只导出对象定义（表结构，函数等）-n: 只导出某个schemagp_dump 默认在master 的data 名目上产生这些文件： gp_catalog_1_<dbid>_<timestamp> ：关于数据库系统配置的备份文件gp_cdatabase_1_<dbid>_<timestamp>：数据库创建语句的备份文件gp_dump_1_<dbid>_<timestamp>：数据库

12、对象ddl语句gp_dump_status_1_<dbid>_<timestamp>：备份操作的日志在每个segment instance 上的data名目上产生的文件： gp_dump_0_<dbid>_<timestamp>：用户数据备份文件gp_dump_status_0_<dbid>_<timestamp>：备份日志12. 数据库恢复 gp_restorepg_restore必选参数：-gp-k=key ：key 为gp_dump 导出来的文件的后缀时间戳-d dbname：将备份文件恢复到dbname13. ma

13、ster 主机硬件故障时，如何切换至stand by master，切换成功后是否需要进行数据检查或恢复等ha答：在stand by master 主机上，运行 gpactivatestandby -d /gpdata 进行切换。由于master 只存储系统元数据信息，切换成功后，一般不需要进行数据检查和恢复。日常巡检中要检查stand by master 是否同步，可以通过表gp_master_mirroring 确认，假如发觉不同步，可以通过命令：gpinitstandby -s standby_master_hostname n 使得master和standby 重新同步。14. 当 m

14、aster 主机硬件故障排解时，如何由 stand by 切换至原 master 主机。答：1,在standby master运行:gpinitstandby s original_master_hostname2，在 standby master 上运行：gpstop m， 留意这里只停止 master 实例3，在原来的 maste 上运行：gpactivatestandby -d /gpdata。4，在原来的 master 上运行：gpinitstandby -s original_standby_master_hostname15. 日志： master 和 segment 上分别有日志

15、：$datadir/pg_log/*.csv$datadir:select * from pg_filespace_entry ;使用外部表将日志导入数据库，进行分析。使用 xfs 文件系统。后台存储名目结构：base下每个名目，对应select oid ,* from pg_database ;selectrelfilenodefrom pg_class:;16. gpconfig:4.0 新增加治理工具，参数配置工具；-c | -change<param_name>-v | -value value-m | -mastervalue master_value-s | -show

16、 <param_name>gpconfig -c max_connections -v 100 -m 1017. gpcheckperf :网络：gpcheckperf -f hostfile_gpchecknet_ic1 -r n netperf-d /tmp磁盘 iogpcheckperf -f hostfile_gpcheckperf -d /data1 -d /data2-r dlinux dd 命令：dd if=/dev/zero of=/vol2/a.test bs=256k count=161000dd if=/vol2/b.test of=/dev/null bs=256k count=16000018. gpssh: 同时登陆到多个机器上，进行操作gpssh-h sdw1 h