POSTGRESQL 数据库导入导出

2020年4月23日

关于pg_dump:

pg_dump -- 将一个PostgreSQL数据库抽出到一个脚本文件或者其它归档文件中。
pg_dump是一个用于备份PostgreSQL数据库的实用工具，即使当前数据库正在使用，也能够生成一致性的备份，且不会阻塞其他用户访问数据库(包括读、写)。
PostgreSQL提供的一个工具pg_dump,逻辑导出数据，生成sql文件或其他格式文件。
pg_dump是一个客户端工具，可以远程或本地导出逻辑数据，恢复数据至导出时间点。
pg_dump只能备份一个数据库
pg_dump 一次只转储一个数据库，并不会转储有关角色或表空间的信息 (因为那些是群集范围而不是每个数据库)。。

关于pg_dumpall：

如果要备份Cluster中数据库共有的全局对象，例如角色和表空间，需要使用pg_dumpall。
备份文件以文本或存档文件格式输出。
Script dumps是一个普通文本文件，包含将数据库重构到保存时的状态所需的SQL命令。
要从这样的脚本恢复，需要将其提供给psql。脚本文件甚至可以用来在其他机器或者其他架构上重构数据库;进行一些必要的修改，甚至可以在其他数据库上使用。
pg_dumpall 在给定的群集中备份每个数据库, 并保留群集范围内的数据, 如角色和表空间定义。

关于pg_restore：

 

PostgreSQL提供的一个工具pg_restore用来导入数据

1.pg_dump导出整个数据库

pg_dump -h localhost -U postgres(用户名) 数据库名(缺省时同用户名)>/data/dum.sql
#use
[postgres@vmonline postgres]$pg_dump -h localhost -U postgres pgtest> ~/dum.sql
#特别注意：数据库名称:pgtest与'>' 之间不能存在空格

其它导出示例：

# 操作系统平面文件格式
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Fp -t test_dump > /tmp/test_dump1.dmp highgo
#自定义格式
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Fc -t test_dump > /tmp/test_dump2.dmp highgo
#tar包格式
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Ft -t test_dump > /tmp/test_dump3.dmp highgo
#自定义、0级压缩格式
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Fc -Z 0 -t test_dump > /tmp/test_dump4.dmp highgo
#自定义、9级压缩格式
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Fc -Z 9 -t test_dump > /tmp/test_dump5.dmp highgo
#显示信息内容
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Fc -v -t test_dump > /tmp/test_dump6.dmp highgo

验证不同格式的文件：

# ll
-rw-rw-r-- 1 pg pg 379738 Nov 1 15:05 test_dump1.dmp
-rw-rw-r-- 1 pg pg 217142 Nov 1 15:05 test_dump2.dmp
-rw-rw-r-- 1 pg pg 384512 Nov 1 15:05 test_dump3.dmp
-rw-rw-r-- 1 pg pg 429852 Nov 1 15:08 test_dump4.dmp
-rw-rw-r-- 1 pg pg 217142 Nov 1 15:07 test_dump5.dmp
压缩格式的文件明显较小
    
不同格式的文件
# file test_dump1.dmp
test_dump1.dmp: ASCII text
# file test_dump2.dmp
test_dump2.dmp: PostgreSQL custom database dump - v1.13-0
# file test_dump3.dmp
test_dump3.dmp: POSIX tar archive
# file test_dump4.dmp
test_dump4.dmp: PostgreSQL custom database dump - v1.13-0
注意1：默认是-Fp格式（操作系统平面文件）
注意2：并行导出只支持-Fd 目录格式
$ pg_dump -h 192.168.6.16 -U highgo -p 5433 -Fc -v -Z 1 -t test_dump > /tmp/test_dump3.dmp highgo
pg_dump: parallel backup only supported by the directory format

2.pg_dump导出某个表

pg_dump -h localhost -U postgres(用户名) 数据库名(缺省时同用户名) -t table(表名) >/data/dum.sql
#use
pg_dump -h localhost -U postgres pgtest -t public.test_table> ~/dum_test_table.sql
#注意：public.test_table中, 'public'是模式名称, 'test_table'是模式中的表名称

pg_dump导出某个模式

pg_dump导出public模式:
pg_dump -h localhost -U postgres(用户名) 数据库名(缺省时同用户名) -s public(模式名称) >/data/dum.sql
[postgres@vmonline ~]$pg_dump -h localhost -U postgres pgtest -s public> /home/lpf/public.sql

2.1 pg_dump 及pgsql配置密码导出数据

# 数据库导出 --
psql "host=XX.XX.XX.XX port=5432 user=XXX password=XXX dbname=XXX" -f table_name.sql
#use
pg_dump "host=localhost port=5432 user=postgres password=123456 dbname=pgtest" -f ~/table_name.sql
# ---------------------------------------------------- #
# 数据库表导出
pg_dump "host=XX.XX.XX.XX port=5432 user=XXXX password=XXXX dbname=XXXXX" -t table_name -f table_name.sql

3.pgsql导入整个数据库

psql -U postgres(用户名) 数据库名(缺省时同用户名) < /data/dum.sql
#use
[postgres@vmonline ~]$ psql -U postgres pgtest < ~/dum.sql
#pg_restore导入数据库
pg_restore -h 192.168.0.100 -p 5432 -U postgres -W -d us2011 -v "/root/us2010.backup"

4. pg_dumpall导出及psql恢复

#pg_dumpall导出
su postgres #（需要切换到系统的postgres用户来进行备份）
pg_dumpall > /backup/all_the_data.backup #（备份整个数据库集群）
#psql恢复
su postgres
psql -f /backup/all_the_data.backup postgres
exit

5.pg_restore恢复

#pg_restore恢复示例
pg_restore -h 192.168.0.100 -p 5432 -U postgres -W -d us2011 -v "/root/us2010.backup"

6.压缩方法 一般用dump导出数据会比较大，推荐使用xz压缩


压缩方法：

xz dum.sql

压缩后会生成 dum.sql.xz 的文件


7.xz压缩数据导入数据库方法

xzcat /data/dum.sql.xz | psql -h localhost -U postgres(用户名) 数据库名(缺省时同用户名)

8.pg_restore数据导入工具

[postgres@vmonline ~]$ pg_restore --help
pg_restore 从一个归档中恢复一个由 pg_dump 创建的 PostgreSQL 数据库.
用法: pg_restore [选项]... [文件名]
一般选项:

 

 

 

  1. -d, --dbname=名字 连接数据库名字
  2. -f, --file=文件名 输出文件名
  3. -F, --format=c|d|t 备份文件格式(应该自动进行)
  4. -l, --list 打印归档文件的 TOC 概述
  5. -v, --verbose 详细模式
  6. -V, --version 输出版本信息, 然后退出
  7. -?, --help 显示此帮助, 然后退出

恢复控制选项:

  1. -a, --data-only 只恢复数据, 不包括模式
  2. -c, --clean 在重新创建之前，先清除（删除）数据库对象
  3. -C, --create 创建目标数据库
  4. -e, --exit-on-error 发生错误退出, 默认为继续
  5. -I, --index=NAME 恢复指定名称的索引
  6. -j, --jobs=NUM 执行多个并行任务进行恢复工作
  7. -L, --use-list=FILENAME 从这个文件中使用指定的内容表排序
  8. 输出
  9. -n, --schema=NAME 在这个模式中只恢复对象
  10. -N, --exclude-schema=NAME do not restore objects in this schema
  11. -O, --no-owner 不恢复对象所属者
  12. -P, --function=NAME(args) 恢复指定名字的函数
  13. -s, --schema-only 只恢复模式, 不包括数据
  14. -S, --superuser=NAME 使用指定的超级用户来禁用触发器
  15. -t, --table=NAME restore named relation (table, view, etc.)
  16. -T, --trigger=NAME 恢复指定名字的触发器
  17. -x, --no-privileges 跳过处理权限的恢复 (grant/revoke)
  18. -1, --single-transaction 作为单个事务恢复
  19. --disable-triggers 在只恢复数据的过程中禁用触发器
  20. --enable-row-security 启用行安全性
  21. --if-exists 当删除对象时使用IF EXISTS
  22. --no-comments do not restore comments
  23. --no-data-for-failed-tables 对那些无法创建的表不进行
  24. 数据恢复
  25. --no-publications do not restore publications
  26. --no-security-labels 不恢复安全标签信息
  27. --no-subscriptions do not restore subscriptions
  28. --no-tablespaces 不恢复表空间的分配信息
  29. --section=SECTION 恢复命名节 (数据前、数据及数据后)
  30. --strict-names 要求每个表和/或schema包括模式以匹配至少一个实体
  31. --use-set-session-authorization
  32. 使用 SESSION AUTHORIZATION 命令代替
  33. ALTER OWNER 命令来设置所有权

联接选项:

  1. -h, --host=主机名 数据库服务器的主机名或套接字目录
  2. -p, --port=端口号 数据库服务器的端口号
  3. -U, --username=名字 以指定的数据库用户联接
  4. -w, --no-password 永远不提示输入口令
  5. -W, --password 强制口令提示 (自动)
  6. --role=ROLENAME 在恢复前执行SET ROLE操作

The options -I, -n, -N, -P, -t, -T, and --section can be combined and specified multiple times to select multiple objects.

9.pg_dump工具参数

[root@vmonline ~]# pg_dump --help
pg_dump 把一个数据库转储为纯文本文件或者是其它格式.
用法: pg_dump [选项]... [数据库名字]
一般选项:

 

 

 

  1. -f, --file=FILENAME 输出文件或目录名
  2. -F, --format=c|d|t|p 输出文件格式 (定制, 目录, tar)
  3. 明文 (默认值))
  4. -j, --jobs=NUM 执行多个并行任务进行备份转储工作
  5. -v, --verbose 详细模式
  6. -V, --version 输出版本信息，然后退出
  7. -Z, --compress=0-9 被压缩格式的压缩级别
  8. --lock-wait-timeout=TIMEOUT 在等待表锁超时后操作失败
  9. --no-sync do not wait for changes to be written safely to disk
  10. -?, --help 显示此帮助, 然后退出

控制输出内容选项:

  1. -a, --data-only 只转储数据,不包括模式
  2. -b, --blobs 在转储中包括大对象
  3. -B, --no-blobs exclude large objects in dump
  4. -c, --clean 在重新创建之前，先清除（删除）数据库对象
  5. -C, --create 在转储中包括命令,以便创建数据库
  6. -E, --encoding=ENCODING 转储以ENCODING形式编码的数据
  7. -n, --schema=SCHEMA 只转储指定名称的模式
  8. -N, --exclude-schema=SCHEMA 不转储已命名的模式
  9. -o, --oids 在转储中包括 OID
  10. -O, --no-owner 在明文格式中, 忽略恢复对象所属者
  11.  
  12. -s, --schema-only 只转储模式, 不包括数据
  13. -S, --superuser=NAME 在明文格式中使用指定的超级用户名
  14. -t, --table=TABLE 只转储指定名称的表
  15. -T, --exclude-table=TABLE 不转储指定名称的表
  16. -x, --no-privileges 不要转储权限 (grant/revoke)
  17. --binary-upgrade 只能由升级工具使用
  18. --column-inserts 以带有列名的INSERT命令形式转储数据
  19. --disable-dollar-quoting 取消美元 (符号) 引号, 使用 SQL 标准引号
  20. --disable-triggers 在只恢复数据的过程中禁用触发器
  21. --enable-row-security 启用行安全性（只转储用户能够访问的内容）
  22. --exclude-table-data=TABLE 不转储指定名称的表中的数据
  23. --if-exists 当删除对象时使用IF EXISTS
  24. --inserts 以INSERT命令，而不是COPY命令的形式转储数据
  25. --load-via-partition-root load partitions via the root table
  26. --no-comments do not dump comments
  27. --no-publications do not dump publications
  28. --no-security-labels 不转储安全标签的分配
  29. --no-subscriptions do not dump subscriptions
  30. --no-synchronized-snapshots 在并行工作集中不使用同步快照
  31. --no-tablespaces 不转储表空间分配信息
  32. --no-unlogged-table-data 不转储没有日志的表数据
  33. --quote-all-identifiers 所有标识符加引号，即使不是关键字
  34. --section=SECTION 备份命名的节 (数据前, 数据, 及 数据后)
  35. --serializable-deferrable 等到备份可以无异常运行
  36. --snapshot=SNAPSHOT 为转储使用给定的快照
  37. --strict-names 要求每个表和/或schema包括模式以匹配至少一个实体
  38. --use-set-session-authorization
  39. 使用 SESSION AUTHORIZATION 命令代替
  40. ALTER OWNER 命令来设置所有权

联接选项:

  1. -d, --dbname=DBNAME 对数据库 DBNAME备份
  2. -h, --host=主机名 数据库服务器的主机名或套接字目录
  3. -p, --port=端口号 数据库服务器的端口号
  4. -U, --username=名字 以指定的数据库用户联接
  5. -w, --no-password 永远不提示输入口令
  6. -W, --password 强制口令提示 (自动)
  7. --role=ROLENAME 在转储前运行SET ROLE

如果没有提供数据库名字, 那么使用 PGDATABASE 环境变量 的数值.

10.pg_dumpall工具参数

[postgres@vmonline ~]$ pg_dumpall --help
pg_dumpall 抽取一个 PostgreSQL 数据库簇进一个 SQL 脚本文件.
用法: pg_dumpall [选项]...
一般选项:

 

 

 

  1. -f, --file=FILENAME 输出文件名
  2. -v, --verbose 详细模式
  3. -V, --version 输出版本信息，然后退出
  4. --lock-wait-timeout=TIMEOUT 在等待表锁超时后操作失败
  5. -?, --help 显示此帮助, 然后退出

控制输出内容选项:

  1. -a, --data-only 只转储数据,不包括模式
  2. -c, --clean 在重新创建数据库前先清除(删除)数据库
  3. -E, --encoding=ENCODING 转储以ENCODING形式编码的数据
  4. -g, --globals-only 只转储全局对象, 不包括数据库
  5. -o, --oids 在转储中包括 OID
  6. -O, --no-owner 不恢复对象所属者
  7. -r, --roles-only 只转储角色，不包括数据库或表空间
  8. -s, --schema-only 只转储模式, 不包括数据
  9. -S, --superuser=NAME 在转储中, 指定的超级用户名
  10. -t, --tablespaces-only 只转储表空间，而不转储数据库或角色
  11. -x, --no-privileges 不要转储权限 (grant/revoke)
  12. --binary-upgrade 只能由升级工具使用
  13. --column-inserts 以带有列名的INSERT命令形式转储数据
  14. --disable-dollar-quoting 取消美元 (符号) 引号, 使用 SQL 标准引号
  15. --disable-triggers 在只恢复数据的过程中禁用触发器
  16. --if-exists 当删除对象时使用IF EXISTS
  17. --inserts 以INSERT命令，而不是COPY命令的形式转储数据
  18. --load-via-partition-root load partitions via the root table
  19. --no-comments do not dump comments
  20. --no-publications do not dump publications
  21. --no-role-passwords do not dump passwords for roles
  22. --no-security-labels 不转储安全标签的分配
  23. --no-subscriptions do not dump subscriptions
  24. --no-sync do not wait for changes to be written safely to disk
  25. --no-tablespaces 不转储表空间分配信息
  26. --no-unlogged-table-data 不转储没有日志的表数据
  27. --quote-all-identifiers 所有标识符加引号，即使不是关键字
  28. --use-set-session-authorization
  29. 使用 SESSION AUTHORIZATION 命令代替
  30. ALTER OWNER 命令来设置所有权

联接选项:

  1. -d, --dbname=CONNSTR 连接数据库使用的连接串
  2. -h, --host=主机名 数据库服务器的主机名或套接字目录
  3. -l, --database=DBNAME 另一个缺省数据库
  4. -p, --port=端口号 数据库服务器的端口号
  5. -U, --username=名字 以指定的数据库用户联接
  6. -w, --no-password 永远不提示输入口令
  7. -W, --password 强制口令提示 (自动)
  8. --role=ROLENAME 在转储前运行SET ROLE
标签：

没有评论

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注