GreenPlum 大数据平台--非并行备份(六)

一,非并行备份(pg_dump)

　　1) GP依然支持常规的PostgreSQL备份命令pg_dump和pg_dumpall
　　2) 备份将在Master主机上创建一个包含所有Segment数据的大的备份文件
　　3) 不适合于全部数据备份，适用于小部分数据的迁移或备份

　　pg_dump是用于备份数据库的标准PostgreSQL实用程序，在Greenplum数据库中也受支持。它创建一个（非并行）转储文件。对于Greenplum数据库的常规备份，最好使用Greenplum Database备份实用程序gpcrondump以获得最佳性能。

　　如果要将数据迁移到其他数据库供应商的系统，或者使用具有不同段配置的另一个Greenplum Database系统（例如，如果要迁移到的系统具有更多或更少的段实例），请使用pg_dump。要还原，必须使用相应的pg_restore实用程序（如果转储文件采用存档格式），或者可以使用客户端程序（如psql）（如果转储文件采用纯文本格式）。

　　由于pg_dump与常规PostgreSQL兼容，因此可用于将数据迁移到Greenplum数据库。 Greenplum数据库中的pg_dump实用程序与PostgreSQL pg_dump实用程序非常相似，但有以下例外和限制：

 　　如果使用pg_dump备份Greenplum数据库数据库，请记住，对于非常大的数据库，转储操作可能需要很长时间（几个小时）。此外，您必须确保有足够的磁盘空间来创建转储文件。
　　如果要将数据从一个Greenplum数据库系统迁移到另一个，请使用--gp-syntax命令行选项在CREATE TABLE语句中包含DISTRIBUTED BY子句。这可确保Greenplum Database表数据在还原时与正确的分发键列一起分发。

　　即使同时使用数据库，pg_dump也会进行一致的备份。 pg_dump不会阻止访问数据库的其他用户（读者或编写者）。

　　当与其中一种存档文件格式一起使用并与pg_restore结合使用时，pg_dump提供了灵活的存档和传输机制。 pg_dump可用于备份整个数据库，然后pg_restore可用于检查存档和/或选择要还原数据库的哪些部分。最灵活的输出文件格式是自定义格式（-Fc）。它允许选择和重新排序所有已归档项目，并在默认情况下进行压缩。 tar格式（-Ft）未压缩，加载时无法重新排序数据，但在其他方面非常灵活。它可以使用标准的UNIX工具（如tar）进行操作

　　参数:

[gpadmin@greenplum01 ~]$ pg_dump --help
pg_dump dumps a database as a text file or to other formats.

Usage:
  pg_dump [OPTION]... [DBNAME]

General options:
  -f, --file=FILENAME      output file name
  -F, --format=c|t|p       output file format (custom, tar, plain text)
  -i, --ignore-version     proceed even when server version mismatches
                           pg_dump version
  -v, --verbose            verbose mode
  -Z, --compress=0-9       compression level for compressed formats
  --help                   show this help, then exit
  --version                output version information, then exit

Options controlling the output content:
  -a, --data-only             dump only the data, not the schema
  -b, --blobs                 include large objects in dump
  -c, --clean                 clean (drop) schema prior to create
  -C, --create                include commands to create database in dump
  -d, --inserts            dump data as INSERT, rather than COPY, commands
  -D, --column-inserts     dump data as INSERT commands with column names
  -E, --encoding=ENCODING     dump the data in encoding ENCODING
  -n, --schema=SCHEMA         dump the named schema(s) only
  -N, --exclude-schema=SCHEMA do NOT dump the named schema(s)
  -o, --oids                  include OIDs in dump
  -O, --no-owner              skip restoration of object ownership
                              in plain text format
  -s, --schema-only           dump only the schema, no data
  -S, --superuser=NAME        specify the superuser user name to use in
                              plain text format
  -t, --table=TABLE           dump only matching table(s) (or views or sequences)
  -T, --exclude-table=TABLE   do NOT dump matching table(s) (or views or sequences)
  -x, --no-privileges         do not dump privileges (grant/revoke)
  --disable-dollar-quoting    disable dollar quoting, use SQL standard quoting
  --disable-triggers          disable triggers during data-only restore
  --use-set-session-authorization
                              use SESSION AUTHORIZATION commands instead of
                              ALTER OWNER commands to set ownership
  --gp-syntax                 dump with Greenplum Database syntax (default if gpdb)
  --no-gp-syntax              dump without Greenplum Database syntax (default if postgresql)
  --function-oids             dump only function(s) of given list of oids
  --relation-oids             dump only relation(s) of given list of oids

Connection options:
  -h, --host=HOSTNAME      database server host or socket directory
  -p, --port=PORT          database server port number
  -U, --username=NAME      connect as specified database user
  -W, --password           force password prompt (should happen automatically)

If no database name is supplied, then the PGDATABASE environment
variable value is used.

Report bugs to <bugs@greenplum.org>.

实例:

1. 只导出postgres数据库的数据，不包括模式 -s

   pg_dump -U gpadmin -f /postgres.sql -s postgres(数据库名)

2. 导出postgres数据库（包括数据）

   pg_dump -U gpadmin -f /postgres.sql  postgres(数据库名)

3. 导出postgres数据库中表test01的数据

   create database "test1" with owner="gpadmin" encoding='utf-8';(单引号，双引号不能错)

   pg_dump -U gpadmin -f /postgres.sql -t test1 postgres(数据库名)

4. 导出postgres数据库中表test1的数据,以insert语句的形式

   pg_dump -U gpadmin -f /postgres.sql -t test1 --column-inserts postgres(数据库名)

5. 恢复数据到gpdb数据库

  psql -U gpadmin -f /postgres.sql gpdb

二,操作指南

　　备份1:

[gpadmin@greenplum01 ~]$ pg_dump -U gpadmin -F t -f /gpbackup/back2/gpdb.tar gpdb
[gpadmin@greenplum01 ~]$

　　恢复:

[gpadmin@greenplum01 ~]$ pg_restore -U gpadmin -d gpdb /gpdb.tar
[gpadmin@greenplum01 ~]$

　　备份2:

[gpadmin@greenplum01 ~]$ pg_dump -U gpadmin -F c -f /gpbackup/back2/gpdb.tar gpdb

　　备份压缩1:

[gpadmin@greenplum01 ~]$ pg_dump -U gpadmin gpdb | gzip > /gpbackup/back2/gpdb.gz
[gpadmin@greenplum01 ~]$

　　恢复

 gunzip -c /gpdb.gz | psql -U gpadmin postgres

cat /gpdb.gz | gunzip | psql -U gpadmin postgres

　　备份切割:

 pg_dump -U gpadmin -d gpdb | split -b 100k - gpback/gpb

　　恢复:

cat /gpback/gpb* | psql -U gpadmin postgres