首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

架构分析和选择策略

通常可通过共享存储或双机双柜方式实现本地,其中多以共享存储为主。 共享存储由三部分组成:活动主节点,不活动备节点,共享存储。...在数据级方式下,所建立异地备中心可以简单地把它理解成一个远程数据备份中心。数据级恢复时间比较长,但是相比其他级别来讲它费用比较低,而且构建实施也相对简单。...应用级生产中心和异地备中心之间数据传输是采用异类广域网传输方式;同时应用级系统需要通过更多软件来实现,可以使多种应用在灾难发生时可以进行快速切换,确保业务连续性。...云结合云平台计算、存储和带宽等诸多优势,相比传统具备了多方面的优势: 基础设施减少 摒弃采购传统服务器,借助云平台供应商提供计算和存储平台,或直接采用云DRaaS应用服务。...快速恢复 为即使有传统定制远程备份,仍然需要时间去做数据恢复和业务重启,且取决于远程备份地点远近和远程服务器性能。而云是可以充分利用云能力,突破物理限制,在云端做到业务启动。

2.6K30

客户案例—zookeeper迁移方案

3台不停止服务最低限度是2台(X/2+1),而5台最低限度是3台。 我们应该保证,集群中最低有3台ZooKeeper是启动。...此外,重启时应保证先重启myid最小机器,由小向大进行重启 Leader无论其myid大小,都放到最后重启 因为ZooKeeper机制中,myid大会向小发起连接,而小不会向大发起连接。.../conf/zoo.cfgMode: follower 将其扩容为5节点ZooKeeper 先查看原先ZooKeeper集群情况 echo mntr|nc localhost 2181 这条4字命令可以查看集群情况...STOPPED 查看新Leader ZooKeeper会尽可能选择myid最大机器为Leader,因此原本idc02-kafka-ds-04其myid为5变为了Leader 12345 [hadoop...然后只要将现在5台再缩小到3台且不包括原本myid为1-2机器,就完成了迁移 将5台缩小回3台 修改idc02-kafka-ds-02 根据前面的注意事项,我们此时5台集群中启动数量不得少于3台,

1.7K51
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    系列(六)——数据存储建设

    数据存储建设主要从数据可靠性和业务稳定性两个维度阐述。这两者有哪些区别呢?...后台数据复制机制能在任何一个副本出现故障时迅速通过数据迁移等方式复制一个新副本,时刻确保有三个副本可用,避免单点故障引起数据丢失等问题,提高数据可靠性。...一般网络抖动都是秒级,建议重试次数通过退避指数方式来进行,以免造成短时间内机器负载突增。 同时针对使用COS分块上传或者重传,有一个优化技巧,首先COS分块上传以下三步: 1.初始化。...场景三:存储设备故障时间较长业务自愈能力建设 如果存储集群或者访问链路出现秒级抖动,采用客户端或者应用重试方式是可行。...这里最常用就是新增COS和CBS盘方式让业务进行临时写入,待故障恢复后,补齐数据。

    3.4K73

    系列(八)——同城数据冷备建设

    为了让企业能更好用好云平台数据安全能力,本文重点云平台数据备份冷备能力,以腾讯云为例,主要从以下两个维度介绍:同城数据冷备能解决企业什么问题,达到怎么样业务效果?...同城冷备份方案同城数据冷备方案主要依赖于云平台能力备份能力,对现有业务架构没有任何改造,方案架构如下:图片该方案核心要点说明:数据备份:云侧数据库mysql和redis在控制台设置数据备份参数,数据备份存储在COS,具备地域级别...mysql数据恢复主要有四种方式:在CVM自建mysql数据库,将备份数据导致恢复,目前控制台仅支持物理备份自动备份,如果使用逻辑备份恢复,需要用户定期调用api和控制台手动操作,恢复过程中要做一些适配兼容...本文小结同城冷备方案,在云平台协助下,企业几乎0成本并拥有同城数据冷备能力来保障业务生命线。指标详细说明能力具备同地域(不同可用区)数据备份能力,不具备不同地域能力。...3.演练能力建设,增加平时运维成本以及自动化工具开发功能。

    6.6K113

    系列(九)——异地数据冷备建设

    企业业务部署在云上,借助云平台能力,企业几乎“零”成本拥有同地域数据备份能力。...2.3 数据库备份服务数据库备份服务拥有一套完整数据备份和数据恢复解决方案,具备实时增量备份以及快速数据恢复能力,同时具备异地能力。...采用数据库备份服务;当前数据库备份服务暂不支持redis,采用api方式进行备份;cos采用异地存储桶复制进行数据备份。...3.2 业务恢复及回切如果云平台自愈能力超出预期,业务在北京地域进行资源1:1部署恢复。对于数据恢复方式如下:cos数据恢复:cos存储桶异地复制,数据无需恢复。...4.本章小结方案实现方式rpo/rto资源费用业务改造数据备份业务恢复api方式实现小时计带宽和存储"零"改造人工实现数据和业务恢复均人工实现云函数与存储桶复制联动小时计带宽、存储和云函数费用"零"改造自动实现同上数据库备份服务小时计带宽

    8.9K164

    系列(三)——云网络建设

    IDC时代,业务对网络参与较少,主要依赖数据中心网络建设程度;当到了云时代,云服务商将底层网络能力产品化后,云上客户更多参与网络建设,提升业务稳定性。...以腾讯云为例,在同地域选择机房地址时候,距离大于60公里,要求不同可用区延时小于3ms,来满足云上客户同城建设基本需求。...2.网络复杂度 同城或者异地建设,网络层面因素主要有三个: 1)跨区或者跨地域网络延时,对上层业务影响。 网络延时,通过优化基础设施手段是非常有限,毕竟受限于实际物理距离和光速。...混合云模式,这里考虑到IDC和云上线路灾情况,一般建议两条专线接入不同POP点来进行建设;同时建立VPN或者GRE公网逃生通道来紧急恢复业务。...注意:对于入口VIP写死情况,客户端升级成本较高。 image.png 3.2 混合云网络 混合云网络分为两个部分: 1)idc和云机房之间线路,主要线路分为专线和VPN。

    4.7K93

    数据中心精讲(常见建设模式)

    当前,市场上常见模式可分为同城、异地、双活数据中心、两地三中心几种。...同城 同城是在同城或相近区域内(≤200KM)建立两个数据中心:一个为数据中心,负责日常生产运行;另一个为灾难备份中心,负责在灾难发生后应用系统运行。...同城灾难备份一般用于防范火灾、建筑物破坏、供电故障、计算机系统及人为破坏引起灾难。 异地 异地主备中心之间距离较远(>200KM)因此一般采用异步镜像,会有少量数据丢失。...由于同城灾难备份和异地灾难备份各有所长,为达到最理想防灾效果,数据中心应考虑采用同城和异地各建立一个灾难备份中心方式解决。...异地备中心是指在异地城市建立一个备份备中心,用于双中心数据备份,当双中心出现自然灾害等原因而发生故障时,异地备中心可以用备份数据进行业务恢复。

    2.3K20

    备知识总结:与备份区别、备技术、体系规划

    系统在企业中给与数据安全系数相当高保障,但是系统倒是是什么,他们是什么意思?恐怕连正在使用备份网络管理人员都不能解释。本文用最浅显语言给大家解释备份到底是什么。...不能替换备份 系统会完整地把生产系统任何变化复制到端去,包括不想让它复制工作,比如不小心把计费系统内用户信息表删除了,同时 用户信息表也会被完整地删除。...如果是同步,那端同时就删除了;如果是异步,那端在数据异步复制间隔内就会被删除。这时就需要从备份系统 中取出最新备份,来恢复被错误删除信息。...常用备组合方式 基于以上原因,业界在备系统建设上一般按照以下几种方式: 建设机房内本地备份系统 建设异地备份系统 该方式可以备份系统价格满足备份和异地功能,能够避免主生产中心由于地震、...同步方式 ? 半同步方式 ? 异步方式 ? 1.2 智能交换机技术 ? 2.1 卷管理软件备技术 ? 2.2 数据库日志复制技术 ? 2.3 数据库备技术 ? 3.1 应用备技术 ?

    10.2K21

    服务与容错

    引子 先介绍几个概念,同步一下认知: :是指系统冗余部署,当一处由于意外停止工作,整个系统应用还可以正常工作。 容错:是指在运行中出现错误(如上下游故障或概率性失败)仍可正常提供服务。...其他没有故障是可靠。 稳定性:这个业界没有明确定义,我理解是:在受到各种干扰时仍然能够提供符合预期服务能力。 从要求严格程度上:可用性<可靠性<稳定性。...可用性和可靠性更侧重于,而对稳定性同时包含和容错。 服务 服务解决方案就是冗余。多几个备份来切换。常用有N+1和两地三中心。N和中心实际上都是机房意思。...N是数据中心电力配置部分。电力配置有市电和备用发动机供电,但是一般互联网公司是不支持备用发动机供电。所以一般一个机房就是一个N。 N+1就是要多出一个机房做。...这个备份冷备和热备不同于数据库冷备和热备。数据库冷备是离线备份,就是不接收新流量情况下备份。热备是一边接收流量一边备份。 而通常服务冷备是服务还没有接收流量。

    3.1K20

    系列(七)——混合云公网出口建设

    本文结合云平台公网能力,从网络平台角度来分析建设可行性。...通常专线接入选择不同POP,多条专线实现互通和高可用。 云平台公网出口能力为EIP。入口流量通过CLB进行分发;出口流量通过NAT网关(即绑定EIP);服务器直接绑定EIP来访问公网。...整体公网出口方案如下: image.png 2.1.1 云平台切换方案。 正常情况下,业务流量通过NAT访问公网,如上路绿色线条标识。...2.1.2 IDC切换方案 正常情况下,IDC业务流量通过NAT访问公网,如上路绿色线条标识。...IDC公网出口方案 (推荐) 1.方案简单,更多依赖云平台能力 2.方案落地快捷。 3.人力成本低,不需要自建系统。 4.维护成本低,不需要后续维护系统稳定性。

    3.1K124

    系列(四)——业务应用层建设

    综上所述,本文从云平台视角出发阐述应用层业务建设,主要分为方案设计考虑纬度、复杂度以及云上客户案例三个方面。 1.应用概述 1.1 应用部署 应用是否满足跨地域/可用区部署?...应用层调用链能接受跨区延时,一般以试点业务先观察,小步迭代方式逐步构建能力。...1)业务完全能接受跨区延时,不同可用区应用部署规模(1:1),各承载50%业务流量; 2)业务并不能完全接受跨区延时,为了做业务做了部分妥协,两个可用区业务部署规模(5:1),主要业务承载在主可用区...切换强依赖于调度系统以及配置系统稳定性。这里稳定性主要包括系统能力和性能;遇到大规模故障,大量信息配置变更请求调度系统和配置系统要能扛住洪峰,是保障这个方案根基。...2.应用复杂度 计算应用层,主要考虑以下两个方面: 哪些节点执行任务。 这里要区分清楚哪些节点执行核心业务,这里会引入不同复杂度。

    3.5K72

    知识知多少

    为什么要做? 你知道吗?自然灾害、设备故障、人为因素等都会造成业务中断。如今数字化时代,IT系统故障更会对公司业务造成难以估量巨大经济损失。...维斯康星州大学 2 监管要求 2011年,银监会发布《商业银行业务连续性监管指引》 2008年,保监会发布《保险业信息系统灾难恢复管理指引》 2008年,中国人民银行发布《银行业信息系统灾难恢复管理规范》 现在公司有责任建立完善管理体系...3 关键词 RPO(Recovery Point Objective) 数据恢复点目标,主要指的是业务系统最大能容忍数据丢失量。...体系介绍 1 数据中心 集团公司通过两地建立三个数据中心,通过双活、冷备等方式,实现两地三中心架构。...演习要求 每年进行演练,所有核心业务与平台系统均要参演。 异地备恢复、同城双活切换、一键式自动化启停等恢复方式不断创新,要求演习规模逐年扩大和恢复效率逐年提升。 - End - ----

    1.3K20

    前端接口

    有没有不白屏方案? 有啊,还挺简单我细细细细分析。 原因就是接口挂了,拿不到数据了。那把数据储存起来就可以解决问题。 思考 存哪里? 第一时间反应浏览器本地存储,想起了四兄弟。...选型对比 特性 cookie localStorage sessionStorage indexDB 数据生命周期 服务器或者客户端都可以设置、有过期时间 一直存在 关闭页面就清空 一直存在 数据储存大小...4KB 5MB 5MB 动态,很大大于250MB 与服务器通信 每次都带在header中 不带 不带 不带 兼容性 都支持 都支持 都支持 IE不支持,其他主流都支持 考虑到需要存储数据量,5MB...带动态标识,譬如时间戳等可以手动过滤 /** * 生成接口唯一键值 */ generateCacheKey = (config) => { // 请求方式,参数,请求地址, const {...劣势包括使用局限,不适合对数据实效性比较高业务场景,不支持 IE 浏览器。 接口我们也是刚弄不久,有许多细节与不足,欢迎沟通交流。 接口本意是预防发生接口服务挂了场景,我们不会很被动。

    23010

    与集群(1)

    World吧,Orleans是为分布式和云计算而生框架,那么今天我们就简单说一说、集群、与集群在Orleans中运用。...简单概述一下就是:通过技术手段将多台计算机(服务器)组合成“一台计算器”对外提供计算服务。 是什么?...技术是系统高可用性技术一个组成部分,系统更加强调处理外界环境对系统影响,特别是灾难性事件对整个IT节点影响,提供节点级别的系统恢复功能。...简单概述一下就是:当一些服务器不可用时可以切换到可用备用服务器上,提高服务可用性。 和集群关系?...个人认为是一种需求,目的,目标,而集群是一种技术手段,使用集群可以提供可用性和可缩放性,那么也解决了问题,当然方式不仅限于集群镜像站点也能解决问题。就好比IOC和DI关系一样。

    1.6K40

    业务切换案例

    是确保系统可靠性很重要一环,一般分为:产品,业务。...产品主要就是将云产品做跨可用区或者跨地域部署,实现多地部署,如果某一个地域出现了问题时候,可以进行自动切换,确保整体可用。...业务,指的是从业务系统出发,对业务系统、中间件组件、网络、计算资源进行全面容部署。确保整个应用及应用所依赖组件能够在某一个区域出现问题时候,能够正常调度到其他正常区域。...根据业务架构及部署实际,规划出应用、各组件、网络计算方案。 3、实施。根据方案进行具体实施。 4、切换演练。...也是通过切换接入域名方式,实现备去应用访问备去中间件组件。 第四步,执行验证,检查应用是否正常运行,业务是否正确,数据是否一致。

    1.2K41

    系列(十)——数据热备能力建设【基础篇】

    企业业务敏感程度差异,对指标RPO&RTO要求也不同。之前两篇文章主要介绍数据冷备,主要特点是数据备份存储非实时,备份系统存储数据通常昨天数据,当灾难真正来临时候,今天新产生数据会丢失情况。...异地明确数据热备能力,实时明确RPO指标接近于“零”。尤其是实时,对于RPO指标提升,为此需要企业投入更多成本。...2)备实例,建议采用云平台PAAS服务,更好兼容DTS同步服务。2.2 平台热备方案2.2.1 数据库备方案目前数据库对于异地备份能力进行封装,来简化云上客户操作成本,提升RTO。...方案关键因素详细说明范围地域级别RPO/RTORPO几乎接近为零;RTO为小时级别,进行1:1业务部署,依赖于业务部署和数据恢复自动化能力。...3.演练能力建设,增加平时运维成本以及自动化工具开发功能。

    5K143

    关于那些事儿

    在同步数据复制方式下,RPO等于数据传输时延时间,在异步数据复制方式下,RPO基本为异步传输数据排队时间。...但部分应用可能需要调整配置; 数据库:通过Oracle dataguard实现数据库复制,切换时需要将机房数据库服务器配置为主节点。...RPO:根据双活机房同步复制,可达到数据零丢失; 备切换关键: Web、应用、数据库服务器:在HA集群上迁移虚拟机至ESX主机上,然后启动虚拟机; 虚拟机文件、数据库文件均使用存储虚拟化技术实时复制...根据关键点,我们梳理一下真实应用备演练过程如下: 图片1.png 应用管理 应用管理员,登录到SaaS后,首先添加目标备应用,包括应用系统基础信息、服务器对象、数据库对象等; image007...通过在线SaaS方式,可集中添加多个备应用系统,并集中管理好每个核心备预案,并且在每一次备演练完成后,直接可在线更新和完善,同时记录其每次预案更新信息,从而实现备演练目标—持续验证和完善备预案

    3.4K70

    Hbase与备份

    一、前言 本文主要介绍 Hbase 常用三种简单备份方案,即CopyTable、Export/Import、Snapshot。...已被删除数据等功能; 执行命令前,需先创建与原表结构相同新表; CopyTable 操作是基于 HBase Client API 进行,即采用 scan 进行查询, 采用 put 进行写入。...因为快照存储仅仅是表元数据和 HFiles 信息。快照 clone 操作会从该快照创建新表,快照 restore 操作会将表内容还原到快照节点。...HBase 配置了基于 Replication 主从复制,由于 Replication 在日志级别工作,而快照在文件系统级别工作,因此在还原之后,会出现副本与主服务器处于不同状态情况。...这时候可以先停止同步,所有服务器还原到一致数据点后再重新建立同步。

    1.5K40

    系列(十一)——数据热备能力建设【进阶篇】

    业务数据备份采用热备方式指标RPO接近“零”;但是RTO指标还是依赖于业务部署测试自动化能力。业务会进一步需要,在数据热备技术架构下,在成本可控情况下,是否能进一步提升RTO指标呢?...到了云时代,资源购买扩容变更加灵活,备区域按照1:0.1部署资源成为可能,当业务恢复时候,进行同比例扩容来承载线上业务。...TKE Serverless 集群支持设置 Kubernetes 原生 HPA 方式,可让服务根据实际负载进行自动伸缩。...mysql采用数据同步方式做实时备份,这里未采用数据库自带备实例,主要是由于备实例为只读,不方便平时做演练切换。...业务恢复业务恢复成本较低,如果以下两个方面做充分:1.备区日常业务验证能力,对于业务全面测试验证上线能力要求较高。2.演练能力建设,增加平时运维成本以及自动化工具开发功能。

    5.1K94

    演练-故障切换

    设计需要进行故障切换场景 设计过程当中需要考虑故障切换场景有很多,数据中心内部高可用切换不在本次讨论范围之内,我们讨论恢复过程中关键跨数据中心级故障切换场景,从网络层到存储层都会涉及到...客户端保存两个DNS地址,根据网络线路健康状况,由客户端操作系统选择第一步地址请求DNS服务器地址,每个数据中心DNS服务器一般会通过HA方式来避免设备单点故障。...4.2 HA数据库服务模式 所谓 HA数据库服务模式是指通过操作系统HA软件结合数据库服务实现架构,架构设计之初是为了实现各类应用服务本地服务器高可用,但双活技术兴起之后,也常常被用来作为近距离...(百公里内范围)双活数据库服务架构 。...Extended RAC之类架构 。

    2.9K31
    领券