需要数据容灾的四个层次,那个品牌比较靠谱?

北京和力记易科技有限公司
北京囷力记易科技有限公司

北京和力记易有限公司是一家专注于容灾备份领域集CDP容灾备份产品研发、销售、服务为一体的高新技术企业、双軟企业。公司所有容灾备份产品都是自主研发拥有完全自主知识产权。

在选用容灾备份软件的时候首选要明确自身需求。例如:实际嘚生产环境(数据环境)、数据库数量和类型哪些应用,需要实现什么样效果

应用级的容灾备份软件,也就是在数据备份与恢复的基礎上能够实现对应用连续性保障的方案。也就是说要做应用级,要先保障数据级灾备方案的有效性这样才能在保证业务连续的时候保障数据的一致性。容灾备份专家型公司北京和力记易科技有限公司一直强调要保障数据备份的完整性和可用性既能100%恢复数据,又能保障恢复数据的可用性

基于CDP持续数据保护技术的备特佳容灾备份软件是应用级容灾备份软件中较为优秀的一个,对于业务连续性要求较高嘚医疗卫生领域的大多数医院都选择了这个软件不妨试试,可以官网去申请免费试用

你对这个回答的评价是?

下载百度知道APP抢鲜体驗

使用百度知道APP,立即抢鲜体验你的手机镜头里或许有别人想知道的答案。

Gitlab从删库到恢复--数据库备份、恢复、容灾、HA的靠谱姿势


如果你是身处数据库行业的朋友最近可能被朋友圈的各种关于 "炉石数据被删" 、 "mongoDB遭黑客勒索" 的事件刷屏。

而就在今天()事情再一次升华 "gitlab 数据库的数据文件被rm -rf误删",数据库的恢复过程和细节有直播视频请参考gitlab的官方解释,以免以讹传讹

数据库在是企业中占据非常重要的位置,发生数据库被SQL注入数据被误删的事情,不仅仅影响业务还可能造成用户的信息被泄露。

DBA一族就像IT行业的邊防战士守卫数据是DBA的重要职责之一。

但是总有防不胜防的时候比如失恋了,喝多了又或者操作界面太多,来回切换过多导致人为夨误率上升

如何让数据文件被rm -rf后还能愉快的玩耍呢?

在很多传统企业中常见的HA手段是通过多主机挂载共享存储来实现的,实际上数据呮有一份因为存储的可用性相比服务器高很多。

这种HA方式的弱点很明显存储存在单点(当然你也可以使用多个存储,物理镜像来解决類似单点)另一方面,由于存储只有一份或者通过镜像产生的多分,因此数据删除时具备传染性一删全删,因此无法抵御gitlab的rm -rf操作

這种HA方式的优点,结构比较简单数据一致性比较好保证。

PostgreSQL 从9.1开始就支持了双副本的同步模式流复制多副本异步的流复制模式,9.6新增了哆副本同步模式

使用这种方式,即使主库的数据文件被rm -rf了由于同步是基于REDO的,所以操作系统的命令并不会被传染可以抵御rm -rf的误操作。

另外还有一重需要注意的点一定要有异地的备份,以及异地的容灾节点这样才能抵御单一机房存在的故障隐患。

你可以把不会变化嘚历史数据存储到阿里云提供的外部对象存储中即节省数据库空间,同时这部分数据又可以免去备份(对象存储本身就是多副本的当嘫话虽如此,作为管理员备份一份到异地或者其他平台也是有必要的)。

库级一致性备份只能恢复到单一时间点,无法做到增量恢复无法做到增量的备份。

另一方面还要注意由于大版本不同的数据库,往往catalog也可能不一样所以逻辑备份使用的备份客户端pg_dump的版本,建議与数据库的版本一致否则是可能会有备份异常或者失败的可能(如果没有注意到这一点,就有可能导致逻辑备份失败哦)

2 在线全量+归档備份

最为常见的备份方式,可以在线进行可以恢复到任意时间点(事务粒度)。

如果忽视了这一点在使用pg_basebackup备份时,如果目标备份目录巳存在同时目录不为空,备份也会异常

请参考pg_basebackup手册,已经写明(这么做也许是为了保证每次备份的稳定性不会受到已有文件的干扰或咑断,作为备份工具设计者鬼知道非空目录会不会有文件冲突呢),平时多看手册还是有帮助的


  

因为每个数据块的头部都有LSN标记,所以PostgreSQL支持数据文件的块级增量只备份上一次备份以来,变更过的数据块同样支持恢复到任意时间点(事务粒度)。相比全量+归档更节约涳间。

4 文件系统、逻辑卷镜像

除了数据库本身支持的数据文件块级增量备份如果你使用了支持快照的文件系统或者逻辑卷管理的存储,那么你还有一种增量备份的选择打快照,注意打快照时需要先执行pg_start_backup('')让数据库进入在线备份状态,打完快照执行pg_stop_backup()

把不会变化的历史数據存储到阿里云提供的外部对象存储中,即节省数据库空间同时对象存储本身就是多副本的。

备份如果只放在数据库的同一机房是无法抵御单一机房的风险的,许多公司会将在异地机房有一份备份的存档或者镜像

对于PostgreSQL数据库,异地备份非常的简便和多样比如

1. 方法1, 对巳经在异地的流式standby节点进行备份,

2. 方法2, 通过文件系统如zfs或存储的快照将备份传输到异地机房

3. 方法3, 将本地的全量备份异步的传输到异地机房,同时将主机房数据库的redo流式的传输到异地机房保证两个机房的数据延迟极低,当主机房发生险情(如地震)时数据丢失率通常能控制在KB或者毫秒内的级别(视带宽和业务情况,即REDO产生的速率与带宽的匹配) 如果你希望做到异地的0丢失,可以拉专线使用异地同步鋶复制,这样的话即使主机房完全挂掉也不会丢数据了。

4. 方法4, 将本地机房的备份数据异步或者通过调度的方式,定时的同步到异地机房的存储中

备份集校验 与 任意时间点恢复(事务粒度)

除了有效的备份,还要保证备份的有效性例如,可以使用以下方法检验备份+归档鉯及快照方法备份的有效性。

除了要有日常的备份HA,异地备份异地容灾,备份集合的校验机制

制定规范,养成良好的习惯也是很重偠的奉上 希望对大家有一丝帮助。

DBA一族九阳神功 1 日常篇

作为DBA一族首当其冲的是守卫数据,让数据库正常运转所以有些事情是骨子里僦应该遵循的。

1. 制定并执行数据库安全规范

2. 制定并执行数据库管理规范

3. 制定并执行数据库开发规范

4. 建立自动化监控系统

5. 建立自动化巡检、備份、HA、异地容灾、异地备份系统、(还有很重要的备份集可用性校验特别是在磁带库时代)

6. 制定节假日的封网机制、应急机制

这样就建立叻一道强有力的封印,可以有效的防止外族入侵

细节请打开如下文档阅读

DBA一族九阳神功 2 重大节假日前篇

1. 春节前,建议增加一次例行的巡檢就好像我们出远门检查一下车子一样。参考

2. 对可预知的业务数据库、(当然还包括应用服务器等)进行扩容这个是很有必要的,通瑺许多业务会在节假日时迎接高峰例如游戏类业务、社交类业务、电商类业务等。

3. 预备一批硬件standby以便应对春节的即时需要

4. 封网,停止變更通常需要提前数天停止变更,减少因为变更带来的潜在问题

例如应用程序变更后,可能新增了一些SQL语句这些SQL语句本身可能没有優化好,又或者无法预知业务对这些SQL语句的请求量并发量等导致数据库在重大节假日存在潜在的炸弹。

5. 排班安排好值日,做到7*24小时有DBA鈳以响应保持手机畅通,同时确保值班的童鞋可以连接网络

6. 通常值日生在节假日期间一个人要负责的业务比平时负责的业务更广泛,所以对值日生进行值班内容、业务的培训也是很有必要的

因此平时的DBA轮岗机制也是很重要的,要绝对避免这样的现象:一个业务只有一位DBA熟悉

7. 宣导,向公司业务方敲锣打鼓的宣导要进入封网期间了,请大家遵循封网规则不要在封网期间做越界的事情(比如变更、发咘)。

虽然在制度上和某些IT手段上控制了封网期间的行为但是难免有漏网之鱼,所以宣导也是很重要的

DBA一族九阳神功 3 重大节假日中篇

1. 徝班,通常分为在线和离线值班在线和上班差不多,可能要随时关注一些NOC平台的指标间歇性的填写一些值班报告。离线值班指被动的接收告警短信邮件,发生问题时上线处理

2. 交接班,交接班是非常重要的通常上一个班的同事会发现一些异常,交代给下一位值班的哃事如果真的遇到问题响应速度和判断效率也更高。

DBA一族九阳神功 4 重大节假日后篇

封网结束后一切又回归正常了。但是有一件很重要嘚事情别忘记了

复盘: 复盘通常指对封网期间的系统状态进行回顾,要达到几个目的:

1 扩容预估是否合理同时建议反馈给业务方相应的数據

2 是否有故障,什么原因导致的将来如何避免

3 监控系统是否存在疏漏,将来如何避免

4 是否有违规变更、发布将来如何避免

相信很多公司都有类似的制度,DBA一族加油做到尽量的避免rm -rf事件,即使真的发生了也可以做到心里不慌,用户不慌

关于《gitlab从删库到恢复》事件,僦不作评论了大家有兴趣的话,建议参考Gitlab的官方回应以免以讹传讹。

同时在任何时候,建立健全的制度都是非常重要的。操作时吔务必保持清醒的头脑尽量少犯人为的错误。

如果有哪些写得不对或者不够完善也感谢指出。

国内领先的云计算增值服务提供商

数据级容灾是最基础的手段指通过建立异地容灾中心,做数据的远程备份在灾难发生之后要确保原有的数据不会丢失或者遭到破坏,但在数据级容灾这个级别发生灾难时应用是会中断的。可以简单的把这种容灾方式理解成一个远程的数据备份中心就是建立一个数據的备份系统或者一个容灾系统,比如数据库、文件等等

优点:费用比较低,构建实施相对简单;

缺点:数据级容灾的恢复时间比较长

应用级容灾是在数据级容灾的基础之上,在备份站点同样构建一套相同的应用系统通过同步或异步复制技术,这样可以保证关键应用茬允许的时间范围内恢复运行尽可能减少灾难带来的损失,让用户基本感受不到灾难的发生应用级容灾就是建立一个应用的备份系统,比如一套OA系统正在运行在另一个地方建立一套同样的OA系统。

优点:提供的服务是完整、可靠、安全的确保业务的连续性;

缺点:费鼡较高,需要更多软件的实现

数据备份,是指为防止系统出现操作失误或系统故障导致数据丢失而将全系统或部分数据集合从应用主機的硬盘或阵列复制到其他的存储介质的过程。数据备份是容灾的基础是抵御灾难的保障,关系数据的安全巧妇难为无米之炊,如果沒有数据的备份任何的恢复都是不可能实现的,一切容灾备份系统建设都是建立在数据备份基础上的

应用容灾是在数据备份的基础上,再建立一套完整的与本地生产系统相当的备份应用系统(最好是异地或本地异地同时建设可以互为备份),在灾难情况下备份应用系统迅速接管业务运行。和数据备份关心数据安全不同应用容灾更关心业务应用的安全,通常表现为通过高可用方案将两个系统连接起来鈳以说应用容灾不仅把数据复制了一份,而且把应用处理能力也复制了一份从而使企业的多种应用在灾难发生时进行快速切换,确保业務的连续性

数据备份是基石,是抗御灾难的保障而应用容灾则是容灾备份系统建设的目标,二者既相区别又相辅相成没有数据备份僦想容灾备份是妄想着建立空中楼阁,而仅仅只靠数据备份就以为万事大吉了也不切实际

北京和力记易科技有限公司的有备无患?备特佳容灾备份系统(以下简称“备特佳”)可以提供应用容灾服务。

1、数据级容灾备份,就是把建立一个数据的备份系统或者一个容灾系統。比如数据库文件,等等常用的方法是基于磁盘阵列的数据复制技术。厂家有EMCHP等等。

2、应用级的容灾建立一个应用的备份系统。比如一套OA系统正在运行,在远程再建立一套同样运行的OA系统,这就是一个应用级的容灾关键技术是要实现数据实时传递,还要保證一致性完整性,可用性常用的方法有数据库的复制方式。厂家有 ORACEL中科同向等等。

3、体系级容灾再建立一整套体系,包括软硬件团队。比如美国总统副总统团队实时的备份。

英方让世界早有准备!

基于数据的灾备,是在灾难发生后对企业数据进行保护保障數据不丢失。普通的数据级灾备可以通过数据备份以人工的方式保存到异地实现比如早几年的磁盘备份的方式。像一些要求比较高的数據级灾备会通过数据复制软件实现生产中心和备份中心的数据异步或者同步复制,比如基于磁盘阵列的数据复制基于应用的灾备,是茬数据级灾备的基础上实现对应用处理能力的复制即备端在灾难发生时,能够实现业务的接管减少业务系统停机的时间,提高业务的連续性英方软件的灾备产品i2CDP、i2Availability能够实现数据的任意时间恢复和灾后的应用即时切换,保证数据的安全性和业务连续性

下载百度知道APP,搶鲜体验

使用百度知道APP立即抢鲜体验。你的手机镜头里或许有别人想知道的答案

我要回帖

更多关于 数据容灾的四个层次 的文章

 

随机推荐