最近业务部门在选择新的AF 系统(具体不能说的太细,能明白AF在某个行业代表什么的估计能看的懂)。之前业务部门购买系统一直是平自己的喜好,功能满足,几百万就花出去。可惜的是功能是满足了,但性能满足不了,在整体的应用中,成为了一个瓶颈。业务部门吸取了相关的教训,在采购新的AF系统的情况下,将数据库方面作为一个考虑的对象,当然我自己也深知为什么,之前的两年一直在和老的AF系统的供应商PK 数据库方面的问题。
本文作者系Scott(中文名陈晓辉),现任大连华信资深分析师 ,ORACLE数据库专家,曾就职于甲骨文中国。个人主页:segmentfault.com/u/db_perf ,经其本人授权发布。
架构解决的问题:结构拆分,就是把大的问题拆解成小的系统,然后把小的系统拆分成若干个层去实现。
因此随着各大云厂商的云平台的发展,越来越多的企业在尝试将自己的应用从本地机房迁移上云。
配置管理数据库( Configuration Management Database,CMDB)是一个逻辑数据库,包含了配置项全生命周期的信息以及配置项之间的关系(包括物理关系、实时通信关系、非实时通信关系和依赖关系)。
在《腾讯云数据库DTS发布全新数据集成方案:全增量无缝同步,快速构建实时数仓》一文中,我们介绍了如何使用DTS的「数据同步」服务,将MySQL数据同步到Ckafka并应用于大数据场景中。读者可能会产生疑问:DTS的「数据订阅」服务也提供了类似的功能,那么这两者有何区别,实际使用时应如何选择?为此,本文将为您详细介绍相关内容。
前言:在chinaunix上总是有很多同学咨询想学习数据库,或者是为入行DBA做些准备。几年来作为一个MySQL DBA的成长过程有一些积累和感悟,特此拿出来和大家分享。 SQL 入门 在准备成为MySQL DBA之前,能熟练的编写SQL是一个必要条件。exists 和 join之间的等价转换;基本的行列转换;SQL 循环等的熟练掌握对之后的运维和调优工作都有很大的帮助。 推荐书籍: 1. SQL Cookbook [原版下载] [中文版下载] 一本循序渐进的SQL指导手册。每一种业务需求,书中都用
一说到无服务计算(Serverless computing),很多人脑海中马上浮现出几个熟悉且令人兴奋的词汇:“瞬间启动”、“弹性扩缩容”和“按量计费”等等。如今,随着公有云的普及,几乎每过一段时间我们都会听到有新的无服务计算产品问世。同时,许多知名的云服务产品,如 AWS Aurora、AWS Redshift、Databricks 等,都陆续推出了它们的无服务版本。一时间,无服务计算迅速成为了行业内的焦点,无论是创业公司还是大型厂商,都在探索推出无服务产品的可能性,甚至在近期备受瞩目的大模型领域,也涌现出了许多关于无服务机器学习平台的讨论。
618大促来临,在零点的时候,你打开购物车、点点点、清空,整个过程一气呵成。但背后,成千上万的数据在马不停蹄、加速流转,以保障消费体验流畅有序。 腾讯云和数据库服务是背后默默守护的“无名英雄”。电商订单、支付、物流等核心链路,都是以数据库为基础。一旦数据库成为瓶颈、或任何细微的疏忽,整个618大促将会变成一个大型“灾难现场”。 一场电商大促,涉及到的数据量有多大? 以一个消费者的购买过程为例,一次下单行为,对于后端数据库就有多次读写调用;如果是秒杀场景就会产生“热点更新”的问题,更是对数据库内核优化能力
这是由一位刚刚毕业的学生提出的,一个毕业生,思考从0建设公司的运维体系,本身就不是一个可落地的事情。但从方法论角度来看,这个问题是有解的。首先,回答怎么做之前,先思考要不要建立一个运维体系。这个和你的公司的现状有关。
多租户本质上是一种软件的技术架构,它最核心的特征是多个租户可以共享一个系统实例,并且租户间是可以实现数据和行为的隔离,这可以说是多租户技术架构里最重要的两点了。
7月20日,腾讯云数据库SQL Server基础版(单机版)正式上线。云数据库SQL Server 基础版提供了正版授权、高可用、高安全、高性能及轻运维的全套数据库解决方案,且兼具超高性价比。腾讯云SQL Server基础版是业内首个支持云上sysadmin权限的云数据库,真正做到自建数据库用户的数据、服务和业务访问都能完全平滑上云,在为用户提供正版企业级服务的同时,价格仅为自建数据库的二十分之一。 相对于云数据库灵活扩容、简易部署、安全可靠等特点,企业通过购买云服务器或IDC自建服务器搭建数据库不仅成
近日,腾讯云数据库TDSQL-C正式协同微信云托管(cloud.weixin.qq.com/cloudrun),为微信开发生态中的业务提供免数据库运维、流量自动伸缩等安全高效的云数据库托管服务,可显著降低用户使用和维护数据库的成本,同时大幅提升业务的项目迭代效率。 微信云托管 (https://cloud.weixin.qq.com) 架构图 TDSQL-C 是腾讯云自研的云原生数据库,100%兼容MySQL和PostgreSQL协议,具备高性能、高可用、极致弹性和海量存储等特性,也是国内首个支持Sev
在助力企业数字化转型的共同目标下,越来越多的服务商正走向更加紧密的合作。而面对海量数据爆发式的成长,以往单一的SaaS产品很难直接满足企业的业务需求,在某些场景下,无论是性能、安全还是稳定性,都面临着各种各样的问题。 日前,拥有多种企业特性的微盟SaaS工具却屡次获得用户认可,这是怎么做到的?以下将带来微盟余成真先生的分享实录: 微盟做为中国领军企业云端商业及营销解决方案SaaS提供商,现有员工超过1万人,入驻商户超过300多万家,在商业产品这块SaaS类云产品,能够为用户提供精准营销服务。 SaaS是
近日,云+社区技术沙龙“高效智能运维”圆满落幕。本期沙龙围绕运维展开了一场技术盛宴,从AIOps、Serverless DevOps、蓝鲸PaaS平台、K8S等分享关于业务运维的技术实践干货,同时带来腾讯海量业务自研上云实践,推动传统运维向云运维转型。本文是孔令飞老师关于腾讯云 Serverless 的运维能力,Serverless 对运维的影响,微信小程序相册的运维案例等内容的分享。本文首发于「云加社区」公众号。
数据库技术发展已达半个世纪之久,云时代开始以后,我们可以从全新的视角审视数据库等基础技术的过去和未来。
昆仑万维是全球领先、业内前沿的综合性互联网集团,业务涵盖昆仑游戏(GameArk)、信息资讯(Opera)等多个业务板块。其中,昆仑游戏(GameArk)凭借研发及运营的核心优势,面向全球进行游戏的研发、发行与运营,形成多样性的产品矩阵。截止 2020 年底,月活用户达到上亿规模。
首先介绍一下我做的这样一个智能运维平台,在这个智能运维平台里面,大致分为这样4个部分:
11月9日,云+社区技术沙龙“高效智能运维”圆满落幕。本期沙龙围绕运维展开了一场技术盛宴,从AIOps、Serverless DevOps、蓝鲸PaaS平台、K8S等分享关于业务运维的技术实践干货,同时带来腾讯海量业务自研上云实践,推动传统运维向云运维转型。下面是孔令飞老师关于腾讯云 Serverless 的运维能力,Serverless 对运维的影响,运维的案例等内容的分享。
今天看到公众号”非法加冯“的文章”数据库应该放入K8S里吗?“,很有一些感触,我想谈谈我的一些看法。
业内普遍定义的石器时代大概是在十几、二十年前,刚刚进入数据库发展的快速轨道,当时的技术方案和对于数据库的认知都处于一个初级的阶段。
本文转载自云加社区 导语 | 虽然数据库上云解决了传统数据库很多问题,但如何让云数据库发挥最优的效能,依然充满极大挑战。为解决这一难题,高速发展的云数据库正在走向“自治”。本文是对腾讯云数据库高级产品经理刘迪在云+社区沙龙online的分享整理,为大家带来腾讯云在数据库自治服务领域的探索和实践,希望与大家一同交流。 点击视频查看完整直播回放 一、数据库自治的演进 上图所示是一张关于数据库自治的宏观视图。 业内普遍定义的石器时代大概是在十几、二十年前,刚刚进入数据库发展的快速轨道,当时的技术方案和对于
周耀荣:感谢大家坚持到现在,我先介绍一下我自己,我叫周耀荣,曾经任职于腾讯、金蝶、华为,现在在珍爱网,也算是数据库DB运维的老兵。
正式干DBA 也是有些年头了,十几年是有了, 前些日子翻出最早买的一本数据库的书是2001年的。这么多年,身边的开发,项目经理,应用运维等等这些“友人”, 说的最多的一句话就是, 早知道干DBA了, 越老越值钱,工作稳定。早些年单纯的我还“喜形于色”,最近这几年听到这话我就想在心底问一句, 你干过吗 ?
【本文正在参与 “100%有奖 | 我的Serverless 实战”征稿活动】活动链接
每逢假期,我们总会接收到很多数据库故障救急请求,因此我甚至经常发出以前的一个总结:警惕数据库假期综合症,呼吁大家提高警惕,防范疏忽下发生的故障和问题。 在这个元旦假期中,我们同样收到了很多的紧急援助请求,这其中大多是熟悉的问题,包括: 数据库回滚段问题导致的ORA-01555错误; SYSTEM表空间坏块导致的BootStrap失败,2662错误; 误删除导致的数据丢失; 空间不足导致的归档挂起; 阳光之下,并无新事,这些问题大都是我们以前曾经面对过的,很多专家已经写过了很多案例,如果大家对类似的问题感兴
现在每个企业单位的信息都是互联网化的,存在于公司的各个电脑和网络数据库当中。而网络风险显而易见,人为或者黑客攻击,都有可能造成信息瘫痪或者丢失。运维人员是企业内部用来管理网络系统的维修人员,他们往往有很多权限比如进入内网或者修改文件等等。如果运维人员没有有效管控,那么危险很可能在内网发生。堡垒机因此而产生。堡垒机连接服务器用什么协议,是启用堡垒机的第一步。
本文介绍了东吴证券旗下东吴秀财 APP 在数据库转型中选择 TiDB 的思考与实践。 原有架构使用 MySQL 分库分表和 MongoDB,但面临着架构复杂、业务扩展性不足、性能问题、开发和运维负担重等挑战。为了有效应对这些问题, 东 吴证券选择 将 MySQL 分库分表和 MongoDB 替换为 TiDB。这一举措极大简化了架构,实现了兼容 MySQL 生态、性能飞跃、金融数据强一致性的 HTAP 以及便捷运维等优势,提升了业务效率和管理效能。 未来,东吴证券计划进一步利用 TiDB 的特性,解决存量 MySQL 实例管理成本高的问题,提升资源利用率和运维效率。
运维的工作通常是针对现有系统的,例如服务器、在运行的服务、监控、添加白名单、添加权限等等,是宽泛而繁琐的,少有建设性的内容。
Growth Hacking这个词在过去一两年开始迅速从硅谷传播到国内,也诞生了一系列专注于企业数据分析业务的明星初创公司,如GrowingIO,神策数据,诸葛IO等。Growth Hacking简单的来说就是用数据驱动的方式来指导产品的迭代改进,以实现用户的快速增长,可以看看上面几家数据分析公司披露的客户就知道它有多流行了: GrowingIO客户:有赞,豆瓣,36Kr等 神策数据客户:秒拍,AcFun,爱鲜蜂,pp租车等 诸葛IO客户:Enjoy,罗辑思维等 我司的一个主要产品是面向中小诊所的运营S
企业构建一站式运维平台的目的是为了提升运维效率。那么一个成熟的运维系统应该要解决哪些问题呢?笔者认为首先是运维对象要被管理起来,然后是监控这些对象,接着是这些对象的自动化运维,最后是所有的运维操作都要有所规范。概括起来对应的系统就是CMDB、统一监控、自动化平台、ITSM,如下图所示。
坚如磐石!全新一代黑石AMD架构实例重磅上线!. 全新一代黑石架构配置规格参数:https://cloud.tencent.com/act/cps/redirect?redirect=10529 推荐
有赞的基础架构使用了UCloud的基础服务,我们有相当比例的数据库是UCloud的RDS(一部分使用云RDS,一部分使用购买他们的物理服务器自建数据库)。
来源 / 阿朱说 (ID:azhushuo ) 作者 / 吕建伟 · 编辑 / 吴暄
运维是一个非常广泛的定义,在不同的用户不同的阶段有着不同的职责与定位。在初创公司,运维工程师的工作可能需要从申请域名开始,购买或租用服务器,上架,调整网络设备的设置,部署操作系统和运行环境,部署代码,设计和部署监控,防止漏洞和攻击等等。
购买VPS后,很多人都会选择自己搭建一个网站,其中使用LAMP+wordpress可以说是最简单的建站方案,下面我就将详细介绍一下具体的建站过程。我使用的是阿里云的服务器,系统是centOS6.5,使用xshell 5 进行远程控制。
今年5月1日公安部发布的等级保护2.0标准中明确提出了对云安全的防护要求。本期主要从保障云平台安全和云租户安全2个层面剖析云安全整体解决方案。
说简单,倒也简单:运维工作就是支持生产运行,是成本中心,一般不直接产生利润。目的就是运行保生产设备软硬件正常运行,让内外部用户满意度。
TDSQL-C 是腾讯云自研的新一代云原生关系型数据库。融合了传统数据库、云计算与新硬件技术的优势,100%兼容 MySQL,为用户提供极致弹性、高性能、高可用、高可靠、安全的数据库服务。实现超百万 QPS 的高吞吐、PB 级海量分布式智能存储、Serverless 秒级伸缩,助力企业加速完成数字化转型。
当你购买了一台 Linux 服务器,想将 Web 应用代码部署到服务器上,并在更新代码版本时能够重新部署,该怎么做? 首先你需要通过 SSH 远程连接到服务器,运行指令安装运行环境和 Web 服务器(前往配置文件的目录编辑文件),另外还需要打开防火墙、加强 SSH 配置,创建账户等初始化操作。 在更新版本后,你还要再次部署代码包并重启 Web 应用。在后续的服务器日常运维中,你更要花费大量时间测试和验证,尤其在出现问题后快速定位问题。 在以上一系列操作中,你都需要执行海量命令并修改大量文件。如何才
随着 Kubernetes(K8s) 的全面成熟,越来越多的组织开始大规模地基于 K8s 构建基础设施层。然而,考虑到数据库在架构中的核心地位与 K8s 在有状态应用编排上的短板,仍有不少组织认为在 K8s 上运行核心数据库会带来颇高的风险。事实上,在 K8s 上运行 TiDB 不仅能实现企业技术栈的统一,降低维护成本,还能带来更高的可用性与安全性。本次分享将介绍 TiDB 在 K8s 上的运维管理系统 TiDB Operator,再从各类故障场景入手剖析 TiDB on K8s 如何实现高效的故障自愈并保障数据安全。最后,我们会分享来自国内外一线公司的 TiDB Operator 生产环境案例,并总结出一套 TiDB on K8s 最佳实践。
腾讯云MongoDB数据库,稳定、弹性、安全、高性能的文档型数据库,兼容 DynamoDB 协议,满足您多样的业务需求
下方视频为邵宗文在未来大会演讲实录。每个行业对数据库有不一样的要求,云上数据库通过智能化运维,数据会越来越多,准确度也越来越高,模型也会越来越精准。腾讯云上数据库如何满足用户多样化的诉求?一起来听听吧。
2021年7月21日,中国人民银行清算总中心2021年支付系统PQDB国产化系统建设项目招标公告发布,采购产品包括国产分布式数据库含集群管控节点、数据库监控系统、数据库运维系统、数据同步工具及系统部署、数据迁移服务和售后服务等。 项目工期:在合同签订后1个月内交付软件产品,在合同签订后2个月内完成系统部署。 投标人须为所投产品(国产分布式数据库软件,运维、监控软件)的原厂商,且拥有自主知识产权。 中标结果 2021年8月19日中标候选人公示发布,腾讯云中标。 第一中标候选人:腾讯云计
随着 5G 和 AI 等技术的发展,作为 IT 系统核心基石的数据库技术也在持续演进,从复杂走向简单。
本案例基于腾讯云一站式开发治理平台Wedata、私有网络VPC、云数据库Mysql和弹性Mapreduce构建了全流程的离线数仓建设流程。通过模拟业务数据的导入,分层ETL和数据应用全过程,演示了如何在Wedata上进行高效的数据开发与治理。
导语 | 数据库正处在变革期,变革的动力同时来自于外因和内因,外因是用户需求的变化,内因是新技术的爆发。用户需求从强调物理上拥有数据到逻辑上拥有数据,因此云服务的形式被越来越广泛地接受;新技术的爆发体现在新的存储介质的产品化。腾讯云原生数据库就是这种变革的产物,腾讯云原生数据库以云服务的方式提供更好的数据库性能,可用性和可靠性。本文由腾讯云数据库技术总监 张青林在 Techo TVP开发者峰会「数据的冰与火之歌——从在线数据库技术,到海量数据分析技术」 的《腾讯云TDSQL-C架构探索和实践》演讲分享
这是之前的一次调研,原来的萌新都成了熟手,而年轻的毕业生也走入工作岗位,我们来看看各家之言。
一 基础安全设备包含哪些? 下图是一个典型的企业业务网络架构包含常见的安全设备。 📷 基础安全设备包含构造业务安全防御系统的常用安全设备,能够搭建深度防御体系的各种安全设备、安全软件。大型的互联网结构不太一样,主要为数据流量很大,传统安全厂家的设备很难满足需求,攻击检测和防护会自己开发,本文还是以传统业务网络为主。传统业务网络包含的安全设备一般有以下几种: 1.1 检测告警类 网络入侵检测 用于检测网络入侵事件,常见部署在核心交换上,用于收集核心交换机的镜像流量,通过检测攻击特征形
如今,随着云计算产业的日益成熟, AIOps、DevOps理念的盛行,大量运维工作通过自动化运维和智能化运维实现,传统运维的生存空间愈发狭窄。
领取专属 10元无门槛券
手把手带您无忧上云