首先介绍一下我做的这样一个智能运维平台,在这个智能运维平台里面,大致分为这样4个部分:
数据库技术发展已达半个世纪之久,云时代开始以后,我们可以从全新的视角审视数据库等基础技术的过去和未来。
周耀荣:感谢大家坚持到现在,我先介绍一下我自己,我叫周耀荣,曾经任职于腾讯、金蝶、华为,现在在珍爱网,也算是数据库DB运维的老兵。
业内普遍定义的石器时代大概是在十几、二十年前,刚刚进入数据库发展的快速轨道,当时的技术方案和对于数据库的认知都处于一个初级的阶段。
本文转载自云加社区 导语 | 虽然数据库上云解决了传统数据库很多问题,但如何让云数据库发挥最优的效能,依然充满极大挑战。为解决这一难题,高速发展的云数据库正在走向“自治”。本文是对腾讯云数据库高级产品经理刘迪在云+社区沙龙online的分享整理,为大家带来腾讯云在数据库自治服务领域的探索和实践,希望与大家一同交流。 点击视频查看完整直播回放 一、数据库自治的演进 上图所示是一张关于数据库自治的宏观视图。 业内普遍定义的石器时代大概是在十几、二十年前,刚刚进入数据库发展的快速轨道,当时的技术方案和对于
一、一个时代的崛起 1. 腾讯新闻:资讯行业擎旗者的突破超越 2012年9月,腾讯新闻客户端安卓版正式发布。彼时,几大传统门户衍生的移动端资讯类APP早已上线推广,新闻客户端领域的用户争夺战,一触即发。2014年底,腾讯新闻在移动端的日活跃用户已达2.5亿,仅在第三方应用商店,腾讯新闻的下载量就达5亿次,是第二名的两倍。不久后,腾讯新闻客户端日活跃用户量已超过行业第二名的两倍,牢固确立领军者地位。 通过和微信进行合作,形成立体联动效应,腾讯新闻一路崛起。微信和手Q双插件渠道成为腾讯新闻客户端独有,其他
前两篇文章,我们谈了腾讯蓝鲸的转型背景、设计思路、在腾讯内部应用推动三大运维阶段。而蓝鲸团队也秉持着开放共赢的态度,逐渐将蓝鲸智云体系开放出来到传统企业,构建生态,武装运维,加速企业自动化运维转型。
AI时代下,数据库、大模型及算法、云计算这三大核心技术领域都各自呈现出多样化的发展趋势,这些趋势相互交织、相互影响,共同推动着整个AI生态系统的发展和进步。
科技发展的好处,体现在很多方面,其中就包括出门办事。 随着政府推行数字化政务建设,利用网络技术的力量,群众办事麻烦的问题得到了很大改善,群众出门办事可以少跑一趟了。 而少跑的这一趟,可能就是腾讯云数据库替你完成的。 20年12月24日,腾讯云数据库2020年度盛典上,我们有幸请到了数字广东网络建设有限公司运维部总经理徐哲为大家分享《政务数据库从应用到平台的演进》,以下是演讲全文: 各位来宾大家下午好,我是来自于数字广东网络建设有限公司的徐哲,来自于建设运维部,非常荣幸今天下午有这样一个机会跟大家分享一
7月21日,2023 Gdevops全球敏捷运维峰会即将在北京举办!本次峰会将以智能为主线,探讨其在数据库、运维、架构、金融科技等领域的落地应用,与产学研各界技术同仁一起探索AIGC、云原生、数智化转型下的新机遇。峰会设置了主会场以及数据库、运维、行业&AI实践三大专场,邀请到来自中国信通院、华东师范大学、京东、美团、字节、中国移动、工行、建行、农行、平安银行、OceanBase、新浪微博、爱奇艺、哔哩哔哩、知乎、vivo、爱可生、新东方、货拉拉、新炬网络等20余家技术领跑单位的专家学者和技术代表,为大家带来可借鉴、易落地的满满干货。
资产通常是指从财务角度定义的能给企业带来经济收益的资源。如:IT资产通常是指企业IT环境中的服务器、网络设备、存储设备、安全设备、风火水电设备等等。
如今,随着云计算产业的日益成熟, AIOps、DevOps理念的盛行,大量运维工作通过自动化运维和智能化运维实现,传统运维的生存空间愈发狭窄。
近些年,传统的数据库运维方式已经越来越难于满足业务方对数据库的稳定性、可用性、灵活性的要求。随着数据库规模急速扩大,各种NewSQL系统上线使用,运维逐渐跟不上业务发展,各种矛盾暴露的更加明显。在业务的驱动下,美团点评DBA团队经历了从“人肉”运维到工具化、产品化、自助化、自动化的转型之旅,也开始了智能运维在数据库领域的思考和实践。
历经一年时间,Gdevops全球敏捷运维峰会再次从成都、上海、北京成功巡回至广州,即将于11月30日举办2018年度收官盛会!
点击上方蓝字每天学习数据库 大咖简介:雷海林,腾讯云数据库技术专家,2007加入腾讯,一直从事支付,数据库领域相关的开发工作。重点研究方向是Linux和数据库内核,在内核编程,后台程序性能优化,分布式数据库方面有丰富经验,目前主要负责分布式数据库TDSQL的研发。 ---- 2019年DTCC中国数据库大会上,腾讯云数据库专家雷海林受邀接受了深度专访。对个人在数据库领域的心路历程,TDSQL智能运维平台架构,以及数据库运维的宝贵经验逐一进行了分享。 采访视频 采访问题 问题1:请您介绍下日常工作重点,以
企业构建一站式运维平台的目的是为了提升运维效率。那么一个成熟的运维系统应该要解决哪些问题呢?笔者认为首先是运维对象要被管理起来,然后是监控这些对象,接着是这些对象的自动化运维,最后是所有的运维操作都要有所规范。概括起来对应的系统就是CMDB、统一监控、自动化平台、ITSM,如下图所示。
专访 3306π深圳站 数据库专场嘉宾 刘迪 会议时间:12月14日无人值守时代,数据库智能运维 会议提点:深圳 腾讯滨海大厦北塔3F多功能厅 欢迎至文末查看会议议程,报名参与! 刘迪 腾讯云 高级产品经理,网名迪B哥,中国计算机行业协会开源数据库专业委员会副会长、北京航空航天大学特聘讲师、数据库领域技术专家。拥有视频、游戏、金融、电商等行业的多年数据库架构设计和优化分析经验,曾担任腾讯视频、腾讯网、腾讯新闻、腾讯体育等业务的数据库管理和运维负责人,对外推出了《迪B课堂》、《我说》等一系列数据库实
经过潜心打磨,结合行业热点 2019年度Gdevops全球敏捷运维峰会 将于5月10日以北京为起点强势启动 展开新一年精彩纷呈的技术巡演! 关于Gdevops全球敏捷运维峰会 国内同时覆盖一线与二线城市的高端技术峰会,会议主题覆盖敏捷运维、AIOps、数据库、云与架构等重点方向。 2016年迄今已成功举办12场,多次巡回北京、上海、广州、杭州、成都等城市,累计参与人次达20000+。 汇聚dbaplus社群数百专家资源,是携手政府、企业共同打造的敏捷运维领域标杆盛会,覆盖从DBA、运维工程师到CXO等所有
Serverless直译是无服务器的意思,俗称“无服务器架构”;所谓“无服务器”,并不是说基于 Serverless架构的软件应用不需要服务器就可以运行,其指的是用户无须关心软件应用运行涉及的底层服务器的状态、资源(比如 CPU、内存、磁盘及网络)及数量,软件应用正常运行所需要的计算资源由底层的云计算平台动态提供。传统的软件开发流程中,软件开发人员需要考虑真正的服务器,因为应用是跑在这个服务器上的,服务器之间相互通过网络通信,通过IP去互相发现,如果服务器down掉,也需要去考虑应用的恢复等等问题。而无服务器架构中应用和服务完全依赖于第三方服务,比如认证,存储,数据库等等,可以称为后端即服务(BaaS),整体采用云平台提供的生态系统。
近日,云+社区技术沙龙“高效智能运维”圆满落幕。本期沙龙围绕运维展开了一场技术盛宴,从AIOps、Serverless DevOps、蓝鲸PaaS平台、K8S等分享关于业务运维的技术实践干货,同时带来腾讯海量业务自研上云实践,推动传统运维向云运维转型。本文是孔令飞老师关于腾讯云 Serverless 的运维能力,Serverless 对运维的影响,微信小程序相册的运维案例等内容的分享。本文首发于「云加社区」公众号。
本次参与活动可以涵盖不同技术层面的用户,可以针对TDSQL-C产品的自动弹性能力、自动启停能力、兼容性、安全、并发、可靠性等多方面进行产品的体验和测评,参与活动的同时既可以收获相关技术领域的实战经验同时也可获得丰厚的活动激励。
2022年度Gdevops全球敏捷运维峰会,将于6月17日以广州为起点正式开启! 与大家携手走过的第7个年头,Gdevops始终坚持输出技术干货、传播前沿理念与实战经验。本次广州站峰会,除了致力于帮助大家解决运维、数据库、金融科技等领域的老大难问题以外,Gdevops还希望与产学研界技术同仁一起探索云原生时代、数字化转型背景下的新趋势、新挑战和新解法。 时间:2022年6月17日 地点:广州阳光酒店 指导单位:上海市软件行业协会、上海市计算机行业协会 学术指导单位:中国信息通信研究院云计算与大数据研究所
近年来,因数据衍生、关联、发展起来的技术层出不穷,我们不断探索数据从资源转化为资产的方法,又面临在数据共享和互通中引发的安全隐患;我们迫切希望进行企业核心数据库的开源化、国产化替换,又碍于“恐龙级”老旧系统的历史遗留问题而难以开展;同时,我们还需要持续跟进如 AIOps、DataOps、混沌工程等新兴技术理念,制定适合自身企业的落地方案…… 为了和大家一起攻克这些疑难,第七届 DAMS 中国数据智能管理峰会将于 2021 年 8 月 27 日在上海举办,携手中国信通院云大所、阿里、腾讯、京东、百度、中国电
近年来,中国移动不断加强业务运营IT支撑系统的自主可控建设。亚信科技AntDB数据库已在运营商核心系统深耕15年,在通信行业的多个领域完成上线并保障持续平稳运行,完全具备国外数据库所具备的能力。因其技术领先性与稳定性,湖南移动借力亚信科技AntDB数据库,积极推进核心业务数据库的国产替代工作。
今天准备谈下AIOps的内容,在我前面已经写过多篇文章谈DevOps研发运维一体化方面的内容,原来也一直看到AIOps的概念,潜意识里面理解是DevOps里面的一个子内容分解。而实际我们看到AIOps和DevOps没有必然的联系。
内容来源:2018 年 11 月 10 日,SOUG联合创始人周亮在“2018 SOUG年度数据库技术峰会”进行《Oracle AI 性能优化指南探讨》的演讲分享。IT 大咖说(微信id:itdakashuo)作为独家视频合作方,经主办方和讲者审阅授权发布。
作者按:日前,工信部印发《推动企业上云实施指南(2018—2020年)》,其中指出:到2020年,力争实现企业上云环境进一步优化,行业企业上云意识和积极性明显提高,上云比例和应用深度显著提升,云计算在企业生产、经营、管理中的应用广泛普及,全国新增上云企业100万家,形成典型标杆应用案例100个以上,形成一批有影响力、带动力的云平台和企业上云体验中心。统计数字表明,当前传统企业用户“上云”的比例仅为20%,仍有高达70%以上的传统企业没有“上云”。本文是作者在HH集团作为企业上云项目技术负责人在项目完成后,对这次企业上云历程的一些总结以及思考。
大模型、生成式AI的迅速蹿红,引爆了新一轮的信息技术革命,算力逐步成为赋能全行业数智化转型的基础能源,也拓展着各类技术领域的能力边界和想象空间。当前,人工智能与数据库的技术融合作为学术界和工业界的探索方向,已取得了不少突破性进展,随之而来的挑战更多是聚焦于数据库的底层设计与架构优化。与此同时,AI从前沿科技落地产业应用,加速着传统运维的“改朝换代”,人机协同的AIOps工作模式被普遍认为是数智时代的运维转型方向。此外,回归国内现状,信创战略已广泛推广于各行各业,接下来如何实现信创核心系统的“真替真用”乃关键所在。
近年来,因数据衍生、关联、发展起来的技术层出不穷,我们不断探索数据从资源转化为资产的方法,又面临在数据共享和互通中引发的安全隐患;我们迫切希望进行企业核心数据库的开源化、国产化替换,又碍于“恐龙级”老旧系统的历史遗留问题而难以开展;同时,我们还需要持续跟进如AIOps、DataOps、混沌工程等新兴技术理念,制定适合自身企业的落地方案…… 为了和大家一起攻克这些疑难,第七届DAMS中国数据智能管理峰会将于2021年8月27日在上海举办,携手中国信通院云大所、阿里、腾讯、蚂蚁集团、美团、携程、快手、工商银行
2.1 第一阶段:实现数据库内核技术的自主可控,提升整体数据处理能力,是企业首要目标
《银行业保险业数字化转型指导意见》《金融科技发展规划(2022-2025年)》等文件对银行业数字化转型做了明确要求,到2025年银行业数字化转型取得明显成效,基于数据资产和数字化技术的金融创新有序实践,个性化、差异化、定制化产品和服务开发能力明显增强,金融服务质量和效率显著提高。
11月9日,云+社区技术沙龙“高效智能运维”圆满落幕。本期沙龙围绕运维展开了一场技术盛宴,从AIOps、Serverless DevOps、蓝鲸PaaS平台、K8S等分享关于业务运维的技术实践干货,同时带来腾讯海量业务自研上云实践,推动传统运维向云运维转型。下面是孔令飞老师关于腾讯云 Serverless 的运维能力,Serverless 对运维的影响,运维的案例等内容的分享。
前段时间整理了一下数据库运维系统的一些内容,比自己预期的要难一些。我来简单回顾下一些参考点。
微博广告基础架构团队负责人、技术专家,商业大数据平台及智能监控平台发起人,目前负责广告核心引擎基础架构、Hubble智能监控系统、商业基础数据平台(D+)等基础设施建设。关注计算广告、大数据、人工智能、高可用系统架构设计、区块链等方向。在加入微博之前,曾就职于百度负责大数据平台建设,曾担任趣点科技联合创始人兼CTO等职位。毕业于西北工业大学,曾在国内外知名期刊发表多篇学术论文,拥有9项发明专利。
文末有数据派THU福利哦 2022年度Gdevops全球敏捷运维峰会,将于5月13日以广州为起点正式开启! 与大家携手走过的第7个年头,Gdevops始终坚持输出技术干货、传播前沿理念与实战经验。本次广州站峰会,除了致力于帮助大家解决运维、数据库、金融科技等领域的老大难问题以外,Gdevops还希望与产学研界技术同仁一起探索云原生时代、数字化转型背景下的新趋势、新挑战和新解法。 Gdevops全球敏捷运维峰会·广州站 时间:2022年5月13日 地点:广州阳光酒店 指导单位:上海市软件行业协会、上海市
作者:冯伟源,高级工程师,腾讯云Redis系统运维负责人。6年DBA经验,一直从事SQL优化、实例调优、数据库架构、海量数据库集群运维、运营平台建设和管理等工作。为 QQ、Qzone、QQ音乐、微云、腾讯云等业务提供数据库服务。
不同企业会有不同的情况,但通常都会遇到运维工作分散、信息不透明、安全性低、灵活性差、技术不足、重复劳动、工作繁琐缺乏工具支持、中心控制失效等问题。
作者:冯伟源,高级工程师,腾讯云Redis系统运维负责人。6年DBA经验,一直从事SQL优化、实例调优、数据库架构、海量数据库集群运维、运营平台建设和管理等工作。为QQ、Qzone、QQ音乐、微云、腾讯云等业务提供数据库服务。 ---- 腾讯云Redis自2015年诞生以来,爆发式增长,为上万家客户提供服务。作者作为唯一的运维负责人,面对三大挑战时如何破解? 元信息的一致性管理 万台设备高效运维 如何实现智能调度 解读腾讯云Redis 腾讯云Redis是基于腾讯内部分布式缓存领域在QQ、音乐、Qzone
架构解决的问题:结构拆分,就是把大的问题拆解成小的系统,然后把小的系统拆分成若干个层去实现。
4月7日,腾讯云正式发布国内首个Serverless数据库新品——PostgreSQL for Serverless。相比普通云上数据库,该数据库能够最快1秒完成部署,成本降低70%。这款数据库的发布是腾讯云数据库拥抱云原生战略的又一落地。
下方视频为邵宗文在未来大会演讲实录。每个行业对数据库有不一样的要求,云上数据库通过智能化运维,数据会越来越多,准确度也越来越高,模型也会越来越精准。腾讯云上数据库如何满足用户多样化的诉求?一起来听听吧。
前言:腾讯与华中科技大学于2018年成立智能云存储技术联合研究中心,联合研究中心旨在通过强强联合建设一流的智能云存储技术创新和人才培养平台,吸引汇聚顶尖专业人才,在分布式存储技术、高性能存储引擎、业务负载预测等方面开展联合技术攻关,突破超大规模云存储服务系统的诸多技术难题,推动智能云存储技术的科技创新及技术应用落地。 SIGMOD数据管理国际会议是数据库领域具有最高学术地位的国际性学术会议,位列数据库方向顶级会议之首。今年腾讯技术工程事业群云架构平台部CDB数据库团队的最新研究成果入选SIGMOD 2
远程运维是工业互联网重要组成部分,没有工业互联网核心技术,远程运维不可能实现目标,设备远程运维平台运用了各种新技术,物联网实现数据接入,云计算实现存储、大数据实现分析, 人工智能实现状态检修与预警预报。
不久前,在由ACOUG与云和恩墨主办的2018数据技术嘉年华的金融科技实战分论坛上,甜橙金融分享了其云化变革的成功经验。
618大促来临,在零点的时候,你打开购物车、点点点、清空,整个过程一气呵成。但背后,成千上万的数据在马不停蹄、加速流转,以保障消费体验流畅有序。 腾讯云和数据库服务是背后默默守护的“无名英雄”。电商订单、支付、物流等核心链路,都是以数据库为基础。一旦数据库成为瓶颈、或任何细微的疏忽,整个618大促将会变成一个大型“灾难现场”。 一场电商大促,涉及到的数据量有多大? 以一个消费者的购买过程为例,一次下单行为,对于后端数据库就有多次读写调用;如果是秒杀场景就会产生“热点更新”的问题,更是对数据库内核优化能力
随着数字经济加速发展,企业数字化转型正向更深层次推进。基于数字技术,企业通过数据驱动,有望实现创新产品服务、变革运营方式和迭代资源组织模式。而这一切都是建立在企业 IT 基础设施之上。
在金融行业海量数据的背景下,绝大多数企业都面临着数据库种类多、数量多等问题,企业亟需获得统一管理数据库的功能;同时,面对复杂的金融业务场景和数据,企业对 DBA 的要求也越来越高,也给数据库运维架构设计和优化带来挑战。 数据库管控能力高,不仅能直接推动企业的数字化转型进程,也能够帮助企业降低运维成本、提升效率,保障数据安全可控。因此,数据库自主管控与智能运维能力十分重要。 数据库架构设计如何满足企业管控要求?如何在实际场景中对接应用?企业在数据库智能运维方面有哪些经验可以借鉴?本次 DBTalk 技术公开课
在金融行业海量数据的背景下,绝大多数企业都面临着数据库种类多、数量多等问题,企业亟需获得统一管理数据库的功能;同时,面对复杂的金融业务场景和数据,企业对 DBA 的要求也越来越高,也给数据库运维架构设计和优化带来挑战。 数据库管控能力高,不仅能直接推动企业的数字化转型进程,也能够帮助企业降低运维成本、提升效率,保障数据安全可控。因此,数据库自主管控与智能运维能力十分重要。 数据库架构设计如何满足企业管控要求?如何在实际场景中对接应用?企业在数据库智能运维方面有哪些经验可以借鉴?8月16日19:00 - 21
据不完全统计,Linux在数据中心操作系统上的份额高达近70%。它一般运行于服务器和超级计算机上,我们日常访问网站背后的数百万台服务器很大几率运行着的操作系统就是Linux。
领取专属 10元无门槛券
手把手带您无忧上云