当前位置: 首页
数据库
如何分库分别导出为多个独立文件_多库备份环境的高级选项配置

如何分库分别导出为多个独立文件_多库备份环境的高级选项配置

热心网友 时间:2026-04-27
转载

分库独立导出需为每个库单独调用 mysqldump 或 pg_dump:MySQL 用循环执行 mysqldump -B "$db" -r "${db}_$(date +%F).sql",PostgreSQL 用 psql -t -c "SELECT datname..." 动态获取库名并 pg_dump -d "$db" -f "${db// /\_}.sql",均需引号保护变量、避免覆盖、控制并发≤2、加 set -e 确保失败中断。

mysqldump 一次导出多个库时如何避免混在一个文件里

很多朋友习惯用 mysqldump --databases db1 db2 db3 来一次性备份多个库,结果发现所有数据都被塞进了一个巨大的 SQL 文件里,中间仅仅用 create databaseuse 语句隔开。这种做法在恢复时其实埋了不少坑:万一目标实例里已经存在同名库,或者当前连接用户的权限不足,整个恢复过程就可能卡在半路,进退两难。

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

所以,想要真正实现“分库独立文件”,没有捷径可走,必须让每个数据库都走一遍独立的 mysqldump 进程。这里有个常见的误解,以为加上 --result-file 参数就能分流,其实这个参数只控制单次命令的输出路径,对合并多个库的操作完全无效。

  • 正确的做法是借助 shell 循环,每次调用 mysqldump 时只传入一个库名。
  • 输出文件名必须包含库名变量,比如 db1_$(date +%F).sql,否则后一个库的备份会直接覆盖前一个,风险极高。
  • 建议加上 --skip-comments 选项,减少冗余注释,避免某些恢复工具误将注释里的 USE 语句当作命令来解析。
  • 如果库名包含中划线、下划线这类特殊字符,mysqldump 本身是支持的,但在 shell 脚本里引用变量时,务必记得加上双引号:"$db"

PostgreSQL pg_dump 分库导出不写死库名的脚本写法

pg_dump 工具本身没有提供一键导出所有非系统库的开关,它的 -d 参数一次只能接受一个数据库。于是有人把命令硬写成 pg_dump -d db1 -f db1.sql && pg_dump -d db2 -f db2.sql 这样一长串。看起来能跑通,可一旦数据库列表有变动,维护起来就成了噩梦。

更稳健的方式,是动态查询 pg_database 系统表,过滤掉模板库后再进行循环导出。这里有两个细节需要特别注意:一是必须排除 template0template1;二是连接参数(比如 -U-h)最好统一放在循环外部定义,别在每次循环里重复写,既啰嗦又容易出错。

  • 使用 psql -t -c "SELECT datname FROM pg_database WHERE datistemplate = false AND datname NOT IN ('postgres')" 来获取需要备份的库名列表。
  • 在循环体内,执行 pg_dump -U $USER -h $HOST -d "$db" -f "$db.sql",记住,$db 变量两端必须加上双引号。
  • 加上 --no-owner--no-privileges 选项是个好习惯,可以避免在恢复时因为目标环境用户不存在而报错。
  • 如果某个库特别大,导出很慢,可以尝试加上 --jobs=2 启用并行导出,但要注意,这只是针对单个库内部的并行,并非跨库并行。

备份脚本里怎么处理库名中的空格或连字符

MySQL 允许库名包含空格(创建时需要用反引号包裹),PostgreSQL 也允许使用连字符(创建时用双引号包裹)。但问题来了,在 shell 脚本里,如果直接把这些包含特殊字符的库名当作变量展开,命令执行往往会直接崩溃。典型的错误就像 mysqldump -B `dbname with space`,系统会报 Unknown database——这其实不是数据库不认识它,而是 shell 把空格当成了命令参数的分隔符,把库名给“切碎”了。

根本的解决方案不是去修改数据库里的库名,而是确保在命令执行时,变量值能被原封不动地传递过去。关键在于理解引号的嵌套和转义层级:外层用双引号保护变量不被 shell 解析,内层可能存在的反引号或双引号,则交给数据库客户端自己去处理。

  • MySQL 场景:使用 mysqldump -B "$db" -r "${db}_backup.sql"。即使 $db 的值本身包含反引号(比如 `my db`),这样写也能正确传递。
  • PostgreSQL 场景:使用 pg_dump -d "$db" -f "${db// /_}.sql"。这里用了一个小技巧 ${db// /_},把库名中的空格替换成下划线,主要是为了避免生成包含空格、可能引发问题的文件名。
  • 一个通用的好建议:所有输出文件路径都尽量使用绝对路径。如果使用相对路径,当脚本通过 cron 定时任务执行时,工作目录可能不是你预想的那一个,文件很容易被写到莫名其妙的地方去。

并发导出多个库时磁盘 I/O 和连接数的实际瓶颈

听起来很美好:用 & 符号在后台并发跑 5 个 mysqldump,备份速度岂不是能翻几倍?但现实往往很骨感,真正的瓶颈通常会卡在磁盘写入速度上,或者把数据库的连接池直接打满。尤其是在使用共享宿主机的云数据库服务时,默认的 max_connections 可能只有 151,5 个库同时 dump 就占去 5 个连接,如果业务本身连接数就高,还可能意外触发慢查询甚至导致锁表。

因此,一个更现实、更平衡的策略是:将并发数控制在 ≤ 2,并且配合压缩进行流式写入。千万别盲目相信“进程越多越快”,对于 I/O 密集型任务,过多的并发反而会因磁盘磁头频繁寻道而导致整体速度下降。

  • 对于 MySQL,强烈推荐在导出 InnoDB 表时加上 --single-transaction 参数。它通过开启一个一致性快照来获取数据,比 --lock-tables 那种锁表的方式对线上业务的影响要小得多。
  • 输出直接通过管道交给 gzip 压缩:mysqldump db1 | gzip > db1.sql.gz。这不仅能大幅节省磁盘空间,还能减少实际的磁盘写入量(写放大)。
  • 对于 PostgreSQL,可以考虑使用 -Fc(自定义格式)替代默认的纯 SQL 文本格式。这种格式体积更小、恢复更快,但缺点是必须使用 pg_restore 工具来读取。
  • 务必在脚本的开头加上 set -e 命令。这样,当任何一个 mysqldumppg_dump 命令执行失败时,整个脚本就会立即停止,防止后续的备份操作继续覆盖或写入不完整的文件。

还有一个极易被忽略的细节:时间戳的精度。如果在同一秒内启动多个 dump 进程,按照常规的 $(date +%F) 生成的文件名就会重复,导致文件被覆盖。哪怕只是毫秒级的冲突,也需要防范。可以采用 $(date +%F_%H-%M-%S-%N | cut -c1-17) 来截断纳秒部分,或者更简单地,在文件名中嵌入进程号 $$,从而彻底避免重名。

来源:https://www.php.cn/faq/2314580.html

游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

同类文章
更多
mysql如何在Docker环境下实现数据持久化_挂载宿主机目录与环境变量设置

mysql如何在Docker环境下实现数据持久化_挂载宿主机目录与环境变量设置

Docker部署MySQL数据持久化全攻略:避免数据丢失的挂载方法与配置要点 Docker中MySQL数据丢失的根本原因与持久化解决方案 直接执行 docker run mysql:8 0 命令启动MySQL容器时,所有数据库文件默认存储在容器内部的临时存储层。一旦容器被移除或重建,位于 var

时间:2026-04-27 22:42
MongoDB 事务为何会导致 CPU 占用过高_排查不合理查询引起的事务扫描量

MongoDB 事务为何会导致 CPU 占用过高_排查不合理查询引起的事务扫描量

事务CPU高主因是未索引查询、snapshot读关注、跨分片协调及聚合误用;应建索引、降级readConcern、单分片操作、禁用事务内聚合。 事务中未加索引的 find 或 update 会触发全集合扫描 MongoDB事务本身其实并不直接消耗大量CPU资源。问题往往出在事务内部:如果执行的查询缺

时间:2026-04-27 22:42
怎样将添加表外键约束同步至生产环境_DDL脚本生成与执行

怎样将添加表外键约束同步至生产环境_DDL脚本生成与执行

外键约束生成DDL前必须确认引用表已存在,检查表、主键名、列名、类型一致性及权限,并注意MySQL与PostgreSQL在语法、锁机制和校验行为上的关键差异。 外键约束生成 DDL 前必须确认引用表已存在 在生产环境给表加外键,失败的原因十有八九很直接:那条alter table add c

时间:2026-04-27 22:42
如何处理Java日期存入Oracle变成00:00:00_java.sql.Date与java.sql.Timestamp的区别

如何处理Java日期存入Oracle变成00:00:00_java.sql.Date与java.sql.Timestamp的区别

应使用 ja va sql Timestamp 或 JDBC 4 2+ 的 LocalDateTime 存储带时间的值 在Ja va应用与Oracle数据库交互时,一个相当经典的“坑”就是时间数据的存储。很多开发者会发现,明明代码里传了一个包含时分秒的时间点,存进数据库再查出来,时间部分却莫名其妙地

时间:2026-04-27 22:42
如何配置物化视图查询重写_ENABLE QUERY REWRITE自动路由SQL至物化视图

如何配置物化视图查询重写_ENABLE QUERY REWRITE自动路由SQL至物化视图

物化视图查询重写:为什么你的配置没生效? 在数据库性能优化领域,物化视图的查询重写功能堪称一把利器。但不少朋友都遇到过这样的困惑:明明按照文档一步步配置了,为什么执行计划还是雷打不动地扫描基表?问题往往出在几个容易被忽略的细节上。今天,我们就来把这些关键点逐一拆解清楚。 物化视图需同时开启全局QUE

时间:2026-04-27 22:41
热门专题
更多
刀塔传奇破解版无限钻石下载大全 刀塔传奇破解版无限钻石下载大全
洛克王国正式正版手游下载安装大全 洛克王国正式正版手游下载安装大全
思美人手游下载专区 思美人手游下载专区
好玩的阿拉德之怒游戏下载合集 好玩的阿拉德之怒游戏下载合集
不思议迷宫手游下载合集 不思议迷宫手游下载合集
百宝袋汉化组游戏最新合集 百宝袋汉化组游戏最新合集
jsk游戏合集30款游戏大全 jsk游戏合集30款游戏大全
宾果消消消原版下载大全 宾果消消消原版下载大全
  • 日榜
  • 周榜
  • 月榜
热门教程
更多
  • 游戏攻略
  • 安卓教程
  • 苹果教程
  • 电脑教程