首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

系列(十一)——数据热能力建设【进阶篇】

业务数据备份采用热方式,容指标RPO接近“零”;但是RTO指标还是依赖于业务部署测试自动化能力。业务会进一步需要,在数据热技术架构下,在成本可控的情况下,是否能进一步提升RTO指标呢?...方案背景数据热,相对于数据冷,通过数据实时同步,对于RPO指标有了质的提升,达到了业务活的标准。但是业务恢复指标RTO没质的提升,主要是业务部署验证需要花费时间过于依赖企业运维自动化能力。...2.核心技术在IDC年代,资源扩容流程繁琐,而且周期长;在区域,按照1:1资源来部署业务,导致成本翻倍。...mysql采用数据同步方式做实时备份,这里未采用数据库自带实例,主要是由于实例为只读,不方便平时做容演练切换。...业务恢复业务恢复成本较低,如果以下两个方面做的充分:1.区日常业务验证能力,对于业务全面测试验证上线能力要求较高。2.容演练能力建设,增加平时运维成本以及自动化工具开发功能。

5K94

实战分享:activemq 在活建设中的研究

由于 activemq 承担着消息服务的重要角色,在这篇文章中我们重点讲述在活建设中 activemq 设计、规划、部署。...随着各个行业对 IT 建设的重视,越来越多的企业、单位正在筹备、实施 IT 建设。由于早期的建设并没有充分考虑多数据中心下容方案,势必在新的多数据中心环境需要做一番整体架构的调整、重建。...本文是对目前业界流行的消费服务产品 active 在活建设的一些探讨,希望起到抛砖引玉的效果。...目标 活建设最完美的架构设计:在同城、异地 2 个数据中心,在最极端情况下,例如单数据中心垮掉情况下,保证消息零丢失,支持 7*24 服务要求。...演讲议题涵盖 Oracle 18c 的新特性解析和 DBA 的未来、 Oracle 数据库故障诊断、金融行业 PaaS 云数据库平台解决方案等。欢迎各位数据库爱好者报名参与! ?

1.7K10
您找到你想要的搜索结果了吗?
是的
没有找到

VMware的活----我在vForum 2015分会场的分享(1)

本次VMware vForum大会(北京站和上海站),有幸和同事Alex You一起分享了《如何基于虚拟化构建活数据中心》课题。我主要负责介绍了VMware活方案。...很多同学表示出来了较大的兴趣,因此写出来共享给大家,由于内容较多,本次先发布部分内容。 一. 谈到,首先谈到灾害。在过去几年中,全球各国经历过许多大范围的灾难,如海啸,地震等。...当一个站点发生故障时,SRM会自动将故障站点的虚拟机在站点重启,实现切换。虚拟机切切换到站点,IP地址可以不变或者改变,站点切换时还可以定义虚拟机切换的优先级。...6.切换开始,过一会,虚拟会在站点重启。 ?...接下来请欣赏-VMware的活----我在vForum 2015分会场的分享(2)--活篇。

2.6K70

VMware的活----我在vForum 2015分会场的分享(2)

上一篇《VMware的活----我在vForum 2015分会场的分享(1)》介绍了VMware技术SRM,作为姊妹篇,本次将介绍VMware活技术。...心跳机制 vSAN延伸集群实施完毕后,vSAN会从主站点和站点分别选出两个ESXi,做站点间心跳通讯检测。...如果站整体出现故障,Master会从主站点选一个ESXi作为心跳的backup。 如果Master和仲裁站点5秒钟没有心跳,那么仲裁站点将被认为出现故障。...同城两个数据中心,异地作为中心通常在远端城市。同城之间,利用vSAN延伸集群提供数据同步复制,异地之间,利用VR提供数据的异步复制。...如果同城两个数据中心均出现故障,那么SRM将会让这些虚拟机在异地站点重启。

3.6K90

11在即,分享一些稳定性保障技术干货

; 90%库存放缓存应对高并发; 10%库存放数据库应对超卖; 3、数据库稳定性保障的SOP 数据库的可用性底线:99.99%; 故障需要有严格的定义规则; 数据库稳定性三板斧: 1)扩容:DB是有状态服务...,计算层便于扩容,将DB节点放到容器中,有需要扩容; 2):对于大流量读场景可通过流量切换方式,将部分流量迁移到备份集群分流; 3)巡检:慢SQL是常见的问题,可通过自动监控和历史数据分析,提供辅助式决策...; 线上监控告警及容预案 1、如何做好监控告警?...数据库层也需要做好监控; 比较好的实践是双机热,在数据同步方面需要有专门的保障机制; 5、高并发下,MySQL主同步会有较大延迟,该如何处理?...,快启快关) ; 同城活架构下,可通过定时任务的方式自动检测MySQL的0模式,定时改写数据; 高并发下MySQL主库往往写压力比较大,事务日志和binlog IO比较频繁,导致库拉取binlog

2.8K20

活数据中心概念及优缺点介绍

b.两个生产中心部署不同的业务系统,互相实时接管。 数据中心活又分为:同城活、异地活。...而一个中心的模式,如果生产数据中心瘫痪,需要半个小时、甚至两个小时、甚至更长时间才能启动中心,在启动中心的时间里,用户交易会严重受损。 活数据中心的最大优势是有效利用资源。...故银行系统容量规划时是充分考虑到交易峰值的,但这样在正常时间就有很大的交易浪费,以淘宝“双十一”活动为例,交易量在几分钟内就可能达到全年交易量的总和,需要系统服务能力提高十倍,这时活数据中心和灵活快速的资源调度就充分发挥出了作用...活数据中心的建设三个条件 活数据中心的建设首先要满足三个条件,第一个是应用活,也就是说数据库一定要实现活,第二个是网络要活,业务网络要保证能够同时联通两个数据中心,第三个是数据要活,两边的数据要能够实现被独立使用...5.性价比并不会太高 我们经常会听到活容方案可以让生产中心和容中心都“活”起来,有效的利用资源,面临灾难性事件时,最大化业务系统的在线性,解除原有系统有等等的不足之处。

2.6K50

【DB笔试面试507】基于数据库的数据复制技术构建方案有哪些?

题目部分 基于数据库的数据复制技术构建方案有哪些? 答案部分 基于数据库的数据复制技术大体上可分为两类:数据库自己提供的数据容模块和第三方厂商提供的数据库复制技术。...与最大保护模式一样,日志数据需同时写到源数据库的联机日志文件和至少一个库的备用日志文件(standby redo log),事务才能提交,与最大保护模式不同的是,如果主库日志数据不能写到至少一个库的备用日志文件...所有复制对象结构(DDL)的改变,都必须通过Oracle提供的复制包来实施 基于日志挖掘 主要用途 恢复、高可用性 数据共享 数据同步 高可用与容、实时数据集成 实现简易程度 实现过程和管理简单...经过对以上几种数据库复制技术的分析,DataGuard、Stream、Advenced Replication是专为Oracle数据库开发的模块,适合于同构平台的Oracle数据库;Shareplex...适合于异构平台的Oracle数据库;GoldenGate适合于异构平台和异构数据库的容与应急备份,消除计划内停机、业务中心、数据仓库实时供给、实时报表等应用场景需求。

1.5K20

蚂蚁金服11.11:支付宝和蚂蚁花呗的技术架构及实践

能够提供支持异地伸缩的能力,提供N+1的方案,提供整体性的故障恢复体系。...整个系统的水平可伸缩性大大提高,不再依赖同城IDC; 可以实现N+1的异地策略,大大缩减灾成本,同时确保设施真实可用; 整个系统已无单点存在,大大提升了整体的高可用性;同城和异地部署的多个单元可用作互的容设施...分布式数据架构 支付宝在2015年十一当天的高峰期间处理支付峰值8.59万笔/秒,已经是国际第一大系统支付。...在可用性方面,与金融云账务体系深度结合,借用账务系统的failover能力,使得蚂蚁花呗通过低成本改造就具备了同城、异地等高可用能力。...任何一个单元的数据库出了问题、能够快速进行容切换、不会影响这个单元的用户进行蚂蚁花呗支付。

4.2K60

天翼云TeleDB数据库如何实现容活?

数据库作为企业数据的管理软件,是企业的核心资产,需要避免单点灾难,因此数据库需求应运而生。 但数据库想要实现绝对可靠的并不是一件容易的事。...随着越来越多的企业上云,如何做好云数据库,确保云上数据安全、保障云上业务不中断,这些问题对数据库技术提出了更高的要求。 此外,不同行业用户对于数据库的需求也不尽相同。...那么,在云时代,数据库方案应如何满足不同用户的需求?数据库的技术理念有着怎样的技术更新和迭代?...但如何达到国内外建设标准,其实是门值得深入钻研的必修课。 作为承载中国电信核心系统业务的天翼云TeleDB数据库,在提供容活能力方面有着出色的表现。...一方面,天翼云借鉴国际国内标准,进一步细化指标,添加库级读写分离、表级读、行级读等能力,让数据库标准更加优化,有法可依。

2.8K10

通过双十一等项目实践看架构技术

每年“ 11”都是一场电商盛会,消费者狂欢日。今年 11 的意义尤为重大,它已经发展成为全世界电商和消费者都参与进来的盛宴。...能够提供支持异地伸缩的能力,提供 N+1 的方案,提供整体性的故障恢复体系。...整个系统的水平可伸缩性大大提高,不再依赖同城 IDC; 可以实现 N+1 的异地策略,大大缩减灾成本,同时确保设施真实可用; 整个系统已无单点存在,大大提升了整体的高可用性;同城和异地部署的多个单元可用作互的容设施...在可用性方面,与金融云账务体系深度结合,借用账务系统的 failover 能力,使得蚂蚁花呗通过低成本改造就具备了同城、异地等高可用能力。...任何一个单元的数据库出了问题、能够快速进行容切换、不会影响这个单元的用户进行蚂蚁花呗支付。

2K30

微服务高可用容架构设计

两地三中心 两地三中心建立在同城活+异地的基础上,兼具高可用性和灾难备份的能力,其中异地中心 是指在异地的城市建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时...整体架构是同城活+主的组合方案。 部署方案: 微服务管控层:同城活部署,异地,各自的数据不需要做同步,只负责各自的服务管控。...应用层:不同数据分片的应用异地多活,相同数据分片的应用同城活,异地数据库层:数据分片一主多从,不同分片异地互。...部署单元设计:考虑容设计,单元与数据库分片绑定,同城单元活,异地部署单元。...应用层:每个地域包含全量单元分片,不同数据分片的应用异地多活,相同数据分片的应用同城活,异地数据库层:数据分片一主多从,不同分片异地互

68170

云上容架构设计与方案

活架构一般是发生是两个数据中心相邻距离不远的场景。如果对于金融级的客户,还会考虑异地的。则采用以下的架构。保障活的公有云中断时,异地的私有云还能够在一定的时间内接管业务。 ?...五、数据级的容方案 对于以上的方案,投入的代价较大,例如需要支付活数据中心的高速通道费用、相同配置的云主机费用。...2、例如下图,也可以通过纯软件的方式进行,直接将备份的文件放下云端、或线下私有云。 ? 这两种方式本质上都是文件级的方案,因此对于数据库等高可靠性的业务支撑不如日志级的数据同步方案。...建议将的周期可以设置为一小时及以上,以保障数据库的运行稳定安全。同时为避免数据库在异常情况下无法恢复,建议使用原厂的工具进行数据实时日志级同步,如Oracle DG、Mysql的主从脚本等。...六、小结 1、如果中型企业、资金预算较充足,可以选择AZ方案、或线上+线下的活高可用方案。 2、对于金融级客户,可以选择两地三中心的方案。 3、对于普通企业客户,可以选择数据级的方案。

5K10

云化数据中心容解决方案

现阶段的云化数据中心的建设都是以主中心和两地三中心的模式为主。通常可以以主中心的模式作为基准,通过详细规划和逐步建设,向两地三中心的模式演进。...3)级别 级别主要考虑应用级容和数据级容(业务级容主要是面向非IT系统的范畴),在具体执行上,又可以分别采用活和主两种工作模式,因此,系统的级别包括: 应用主...数据主 应用活 数据主 应用活 数据活 工作模式 应用和数据仅在生产中心运行,并通过异步方式备份到中心。...图 5 数据一致性的挑战 数据库是容建设的关键,数据的一致性是实现同步需要首先考虑的问题,这需要通过在主数据中心之间建立数据的同步机制来保障。...在传统数据中心中,建设同步活级别的系统需要在生产中心和中心中配置对等的基础资源,而云化数据中心的建设则可以大大降低建设成本。

4.1K10

“两地三中心”和“活”简介--容技术方案

与异地模式相比较,本地中心具有投资成本低、建设速度快、运维管理相对简单、可靠性更高等优点;异地中心是指在异地建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时...异地中心 是指在异地的城市建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时,异地中心可以用备份数据进行业务的恢复。...( 生产中心、同城中心、异地 中心 ) 4、 活 数据中心 所谓 “ 活 ” 或 “ 多 活 ” 数据中心,区别于 传统 数据中心 和 中心的模式,前者 多个 或两个数据中心都处于运行当中...第三方数据库复制技术: 典型代表:Quest Shareplex 方案优势:IP网作为复制链路,成本低,支持异构存储,生产中心和中心活,资源利用率高,针对不同数据库类型有相应复制方案。...异地中心是指在异地的城市建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时,异地中心可以用备份数据进行业务的恢复。 1.3.4.

11.3K126

服务器解决方案–两地三中心(图文详解)

(以时间来度量),这是一个系统所选用的数据复制技术有密切关系的指标,用以衡量方案的数据冗余备份能力。...与异地模式相比较,本地中心具有投资成本低、建设速度快、运维管理相对简单、可靠性更高等优点;异地中心是指在异地建立一个备份的中心,用于中心的数据备份,当中心出现自然灾害等原因而发生故障时...,异地中心可以用备份数据进行业务的恢复。...业务以及基础组件异地活方案 数据库的异地活 Zookeeper异地活 先来点背景知识: 1、zookeeper中的server机器之间会组成leader/follower集群,1:n的关系。...基于功能分表方案 根据不同的功能拆分数据库或表,也是一种非常不错选择。 总结 方案都是有成本和风险的,也没有银弹,不可能打死所有的怪兽。还是随着业务发展,不断的演化才是王道。

15.7K103

高校容备份方案 2.0

本文叙述了高校业务系统及数据容备份方案 2.0 的应用探索和实践,介绍了数据库活、应用秒级容和数据级实时备份、虚拟化平台备份等综合性创新应用,满足当前教育信息化 2.0 行动计划的信息安全需求...关键字:数据库活 容 CDP 虚拟化备份 一、行业背景 新一代信息技术、通信技术、人工智能的飞速发展,给教育信息化的腾飞插上了翅膀,大部分的教育机构也在“教育信息化 2.0 行动计划”的发展纲要下,...△容备份方案 2.0 2.0 方案覆盖数据库系统故障、应用系统故障、单机单点故障、逻辑错误&病毒攻击、自然灾害等场景,满足高校在数据库活、云、容秒级接管、数据持续保护等容备份需求,具备了多层次...、多策略、全域的特征优势,其重要功能应用如下: 1.Oracle RAC 数据库集群容备份 通过数据库结构化同步软件 i2Active,对 Oracle RAC 数据库集群环境的业务系统,进行一对一的活保护...,即到对应单机 Oracle 数据库系统内。

1.6K30

高可用解决方案:同城活?异地活?异地多活?怎么实现?

偏硬件的方式,也被叫做数据级;偏软件的,被叫做应用级。后文谈得更多的是应用级。 双机互 本质上还是Active/Standby,只是互为主从而已。...同城活其实和前文提到的双机热没有本质的区别,只是“距离”更远了,基本上还是一样(同城专线网速还是很快的)。双机热提供了能力,双机互避免了过多的资源浪费。...远端的备份机房能更大的提供能力,能更好的抵抗地震,恐袭等情况。活的机器必须部署到同城,距离更远的城市作为机房。...机房是不对外提供服务的,只作为备份使用,发生故障了才切流量到机房;或者是只作为数据备份。原因主要在于:距离太远,网络延迟太大。...异地活 同城活可以应对大部分的情况,但是碰到大面积停电,或者自然灾害的时候,服务依然会中断。

3K20

聊聊高可用的“异地多活”架构设计

偏硬件的方式,也被叫做数据级;偏软件的,被叫做应用级。后文谈得更多的是应用级。 双机互 本质上还是Active/Standby,只是互为主从而已。...同城活其实和前文提到的双机热没有本质的区别,只是“距离”更远了,基本上还是一样(同城专线网速还是很快的)。双机热提供了能力,双机互避免了过多的资源浪费。...远端的备份机房能更大的提供能力,能更好的抵抗地震,恐袭等情况。活的机器必须部署到同城,距离更远的城市作为机房。...机房是不对外提供服务的,只作为备份使用,发生故障了才切流量到机房;或者是只作为数据备份。原因主要在于:距离太远,网络延迟太大。...3、异地活 同城活可以应对大部分的情况,但是碰到大面积停电,或者自然灾害的时候,服务依然会中断。

1.5K20

混合云应用活容最佳实践

应用、中间件云上云下冗余对称部署,同时对外提供服务(应用活)。 数据库异地主,异步复制备份。应用读写同一数据中心的数据库,避免考虑一致性问题。...数据同步&数据库连接切换 数据库异地主部署,云上云下应用日常态均读写云上 Redis 和 RDS 数据库,无需考虑数据一致性问题。...改造内容 应用上云 选择跟自建 IDC 较近的阿里云地域,云上完全冗余的部署一套应用、中间件和数据库,以便搭建云上云下活容架构。在这个 Demo 案例中,选择杭州 Region 作为容单元。...中间件和数据库: 云上部署 MSE 托管 ZK/Nacos 注册中心、云数据库 Redis 和 RDS,建议使用跨可用区部署高可用版本,具备同城活容能力。...主切换详情页,可以看到切换进度和切换结果,任务进度 100% 后,表示切换完成。 商品、订单、购物车数据库都主切换完成后。

3K20

简述异地多活方案以及腾讯云实践

下面我们主要阐述的也是数据层的容。主流容架构同城同一个城市至少部署两个机房,仅主机房对外提供服务, 机房平时不提供服务能力,主要作为主机房的备份,主之间数据采用单向同步的形式。...缺点: 数据中心存在资源浪费的情况;关键时刻不敢切流,容易出现版本、参数、操作系统不一致等情况同城活两个机房同时对外提供服务。...对于延时敏感的系统跨机房写会给用户带来不好的体验伪异地活(应用层活)这种架构与同城活有很多相似之处,唯一的区别在于数据中心的读写进行了分离,读操作直接读数据中心,而写操作为了保证数据一致性,将打到主数据中心的数据库上...云上容架构分析案例一腾讯云上云基础架构云上基础容架构如下(数据层采取同城活):图片主要产品:CDN 加速WAF应用防火墙+DDOS防护CLB 负载均衡(多可用区)多可用区云主机数据库(多可用区主...+异地)

2.7K94
领券