首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

如何利用开源DevOps工具完成云上的自动运维

在本次演讲中,黎山通过实际应用场景为我们讲述了基础设施及代码的重要性,以及在云计算的运维中,如何利用工具来实现自动化,提高效率。 ?...如果要实现这样的一个架构,需要做以下8个步骤来完成这些基础设施的搭建:创建ECS、创建安全组、添加安全组规则、创建SOB、添加后端服务器、配置监听端口、配置会话保持、添加健康检查。...如果要实现这样一个基础设施的话,大的步骤是需要以下七步:创建为PC、创建VSWITCH、创建NET网关、新建共享带宽包、创建ECS、创建SLB、创建SNAT、最后挂载SLB。...按照传统的操作方式,先将已经安装好应用的ECS打上快照,然后生成镜像,基于此镜象创建ECS,再添加SLB当中,同样这里面省略了若干的配置步骤。 ?...Packer会通过模板自己来决定是基于阿里云的基础镜像创建还是基于自定义镜像创建,然后会自动创建一个经典网络的ECS或者是VPC网络的ECS,同时会根据模板的定义在ECS之上去添加这个去安装相关的应用,

3.2K70

高并发口罩抢购项目架构演进记录&优化经验分享

架构图&分析-V2 随后我方介入,进行架构调整,24点左右找的我们,早上9点要开服,时间太紧,任务太重,程序不能动的情况下,几十万的并发架构如何做?...这样架构设计: 优点:增加了高可用性,扩展了负载能力; 缺点:对流量预估不足,静态页面也在 ECS 上,因此 SLB 的出带宽一度达到最大值 5.X G,并发高达 22w+。...总结 时间紧任务重,遇到了N多的坑: vcpu 购买额度; SLB 后端挂载额度; 客户余额不足欠费停机; 域名服务商解析需要联系客服才能添加; 第一次考虑 CDN 架构的时候未考虑跨域问题; 新程序开发期间未连接主库测试...后端ECS数量,ECS 配置统一; Nginx 反代后端 upstream 无效端口去除; 云助手批量处理服务,参数优化,添加实例标识;(划重点,大家批量使用 ECS,可以考虑利用云助手这个产品) 云监控大盘监控...,ECSSLB、DCDN、Redis等; 调整 SLB 为 7 层监听模式,前 7 后 4 关闭会话保持导致登录状态失效。

2.1K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    当SRS遇到K8s:快速构建高并发直播集群

    本章描述了如何基于K8s构建EdgeCluster实现高并发流媒体播放。...在这个场景下,对比K8s和传统使用方式的差异: 对比 ECS K8s 说明 申请ECS 手动 自动 部署时,ECS需要手动申请,K8s自动申请 安装包 脚本 镜像 Docker方式更优,版本管理,可Cache...看门狗 手动 自动 SRS异常退出由看门狗重新拉起,非K8s需要手动安装,K8s自动管理和拉起服务 更换ECS 手动 自动 ECS更换时,非K8s需要手动申请,修改SLB,安装服务,K8s自动迁移服务...,更新SLB配置监听和保活等 配置 文件 Volume ECS需要手动管理配置;K8s配置在ConfigMap,通过Volume挂载为配置文件,扩容时不用变更 扩容 手动 自动 需要新开进程时,ECS需要申请部署和配置...,K8s只需要修改Replicas数目即可(也可自动扩容) 发现 手动 自动 Origin变更IP时,ECS需要手动修改配置,K8s自动通知边缘和自动发现 SLB 手动 自动 新增Edge时,ECS需要手动更新

    1.6K10

    当SRS遇到K8s:如何构建海量推流源站?

    文 / 杨成立 相关文章:当SRS遇到K8s:快速构建高并发直播集群 本章描述了基于K8s,如何构建Origin Cluster支持超多推流场景。...在这个场景下,对比K8s和传统使用方式的差异: 对比 ECS K8s 说明 申请ECS 手动 自动 部署时,ECS需要手动申请,K8s自动申请 安装包 脚本 镜像 Docker方式更优,版本管理,可Cache...看门狗 手动 自动 SRS异常退出由看门狗重新拉起,非K8s需要手动安装, K8s自动管理和拉起服务 更换ECS 手动 自动 ECS更换时,非K8s需要手动申请,修改SLB,安装服务,K8s自动迁移服务...,更新SLB配置监听和保活等 配置 文件 Volume ECS需要手动管理配置;K8s配置在ConfigMap,通过Volume挂载为配置文件,扩容时源站手动更新自动推送,边缘扩容自动更新 扩容 手动...,或自动更新 SLB 手动 自动 新增Origin时,ECS需要手动安装和更新配置,K8s自动安装,手动更新但自动推送配置 存储 手动 自动 扩容存储时,ECS需要手动安装和更新,K8s会自动更新,不影响业务

    1.1K20

    一次Kubernetes网络不通争吵引发的思考

    Cloud Native "你到底在说什么啊,我K8s的ecs节点要访问clb的地址不通和本地网卡有什么关系..." 气愤语气都从电话那头传了过来,这时电话两端都沉默了。...同时集群外的ECS192.168.3.100访问192.168.1.200:443和192.168.1.200:80都是正常的。...Cloud Native 我们都知道K8s的nodeport和loadbalancer模式是可以调整外部流量策略的,那么图中的「外部策略为Local/Cluster,所有集群节点创建IPVS规则是有区别的」该如何解释呢...110.0.4.141:30745 的IPVS 的规则添加的Nginx的所有后端POD nginx-79fc6bc6d-8vctc 10.0.2.78 和 nginx-79fc6bc6d-j587w...节点访问不通 SLB IP(源 IP 是 SLB IP,没有人做 SNAT) 可以看到没有Endpoint的节点的SLB IP 的IPVS 的规则添加的Nginx的所有后端POD nginx-79fc6bc6d

    25210

    云上数据安全

    目录 课程介绍 1.数据安全概述 常见的数据安全问题 数据本身及数据防护的安全 阿里云的数据安全防护 2.数据备份、恢复和容灾 常见的不同级别的备份方法 云服务器ECS快照 云数据库RDS备份与恢复...1.开通服务 2.添加控制台域名 3.使用HTTPDNS解析域名 4.客户端集成HTTPDNS 5.阿里云的数据传输安全实践 负载均衡SLB HTTPS支持 Web应用防火墙WAF HTTPS支持 云数据库...在备份设备开始启动到提供服务,有一定的时间差 云服务器ECS快照 ? 云数据库RDS备份与恢复 ? 云数据库RDS数据导入、导出 ? 云数据库RDS主备实例、灾备实例 ?...如何使用HTTPDNS? 1.开通服务 ? 2.添加控制台域名 ? 3.使用HTTPDNS解析域名 ? 4.客户端集成HTTPDNS ?...5.阿里云的数据传输安全实践 负载均衡SLB HTTPS支持 ? Web应用防火墙WAF HTTPS支持 ? 云数据库RDS的传输安全——SSL加密 1.开通SSL ? 2.设置SSL ?

    3.8K43

    记一次混合云API暴露的反思

    客户为金融企业对SLA要求及数据安全性很高,有限于考虑到业务的高可用性,采用混合云部署,业务流量入口为阿里金融云,前端可以添加安全设备WAF/CDN/高防IP等,之后Cname到统一入口SLB负载均衡上...,后端采用虚拟服务器组,组内ECS部署在同Region的不同Zone,保障跨Zone的靠可用性,考虑到数据的安全性将数据持续化在IDC侧,阿里云与IDC通过云上部署深信服设备与IDC侧Cisco设备通过...的七层模式将证书放置在SLB上。...1.4 解决方案: 既然Nginx反代不行,SLB后端也无法直接添加IDC侧的APP服务器,那就利用WEB-server利用iptables进行端口转发,配置DNAT和SNAT直接将流量抛过去,想到这里开始着手测试实施...2.3 域名及SLB 由于是测试域名前端暂时未添加WAF/高防IP等防护设备,将域名解析A记录解析至SLB公网地址,SLB配置虚拟服务器组,组内添加Web-Server,此时监听端口为Dnat端口。

    1.6K30

    每秒处理1000万用户请求…云上架构如何实现高性能和高可用

    内容来源:2017 年 12 月 21 日,驻云科技资深架构师翟永东在“云时代企业架构的搭建”进行《云上架构如何实现高性能和高可用》演讲分享。...阅读字数:2851 | 8分钟阅读 摘要 云上架构需要关注多方面的因素,本次主要讲的是高可用和高性能,从这两方面展开深度的解析如何搭建完善的云上架构。...前端用户请求通过CDN服务响应,CDN主要用来做服务加速,对于可以满足的响应直接使用CDN解决,无法满足的请求转发给后端SLB。...从图中可以看到不同的应用使用的服务器数量不同,这里所有的服务都被部署到ECS上,ECS又挂载在SLB后面,另外其中还有OCS数据缓存,用户请求的数据如果无法从缓存中获取到,就从数据库中读取。...健康检查自我修复 如果某台ECS实例不健康,导致健康中实例数低于最小值,弹性伸缩就会自动创建健康的ECS实例代替不健康的实例。

    1.7K10

    CDN绕过并如何做防护

    6 如何防止CDN防护被绕过 当攻击者发现目标站点存在CDN防护的时候,会尝试通过查找站点的真实IP,从而绕过CDN防护。...我们来看一个比较常见的基于公有云的高可用架构,如下: CDN(入口层)->WAF(应用层防护)-> SLB(负载层)-> ECS(源站) -> RDS(数据库)...即对应关系为:域名 cname CDN,CDN-→WAF,WAF-→ SLBSLB-→ ECS; image.png f 我们重点来关注一下CDN-→WAF-→SLB-→ECS这几层服务的关系。...假设,攻击者知道SLB的真实IP地址,就可以直接访问SLB的ip地址,从而轻易绕过CDN+WAF的安全防护。 这里分享一个CDN防护技巧,通过中间件配置只允许域名访问,禁止ip访问。...6.1 Nginx参考配置 # 添加一个server,在原server里绑定域名 server { listen 80 default; server_name _;

    1.8K40

    k8s零中断滚动更新

    今天我们来详细分析下这种架构为何在更新应用时会发生服务中断以及如何避免服务中断; 业务部署图 image.png 2 为何会发生服务中断 Deployment 滚动更新时会先创建新 pod,等待新...解决办法 为Pod配置就绪检测,等待业务代码初始化完毕后再将node加入到SLB后端; 2.2 删除Pod 在删除旧 pod 过程中需要对多个对象(如 Endpoint、ipvs/iptables、SLB...变化后,会将Node从SLB后端移除,当节点从SLB移除后,SLB对于继续发往该节点的长连接会直接断开,导致服务中断; 解决办法: 为SLB设置长链接优雅中断(依赖具体云厂商) 3 如何避免服务中断 避免服务中断可以从...SLB 限制了每个 ECS 上能够挂载的 SLB 的个数,默认值为 50,当 quota 消耗完后会导致无法创建新的监听及 SLB。...后端,因此 SLB quota 消耗较慢。

    2.6K10

    网站数据增多 访问量增大后 扩容增配还是动静分离?

    这个意思说起来就是把数据库放在阿里云数据库主机上;图片视频、文档资料放在阿里云OSS对象存储上,这样ECS服务器只负责网页文字内容的访问,压力减轻很多。...但是据他说现在日流量很大,给数据库的压力也不小,正在考虑单独购买云数据库,做到彻底的动静分离,减轻ECS云服务器的压力。这样才能有效提高服务器效率,解决客户访问中的最后一个痛点,加快打开速度。...2、如果再大的业务规模和流量,就得考虑使用阿里云均衡负载SLB了。这时候后端有多台ECS云服务器,通过前台的SLB来平衡调度流量分发给哪些服务器。...一是单一服务器提供访问支持;二是动静分离,用云服务器、对象存储和云数据库提供服务;三是业务大到一定规模了,普通的动静分离又遇到瓶颈了,这时候前端用阿里云CDN分布到各地的节点,然后用阿里云负载均衡SLB...来处理这些访问,后端用ECS云服务器、云数据库、对象存储分担压力。

    3.3K10

    分布式系统接口,如何避免表单的重复提交?

    分布式系统接口,如何避免表单的重复提交? 幂等性 重复请求场景案例: 幂等性的实现方式 关于怎么实现承载更多用户量的系统,一直是我重点关注的一个技术方向。...硬件架构改进,主要是使用阿里云这种多组件的云环境:通过负载均衡SLB,模版克隆的云服务器ECS,云数据库RDS,共享对象存储OSS等不同职责的云产品组合实现。...举个栗子:比如添加请求的表单里,在打开添加表单页面的时候,就生成一个AddId标识,这个AddId跟着表单一起提交到后台接口。...后台接口根据这个AddId,服务端就可以进行缓存标记并进行过滤,缓存值可以是AddId作为缓存key,返回内容作为缓存Value,这样即使添加按钮被多次点下也可以识别出来。

    8310
    领券