从 2009 年到 2021 年,从千万交易额到千亿交易额,双 11 已经开展了 12 年。如今,每年的双 11 以及一个月后的双 12,已经成为真正意义上的全民购物狂欢节。...是什么样的数据库撑起了 2021 年的双 11 双 12 的稳定进行?...《数据 Cool 谈》第三期,阿里巴巴大淘宝技术部双 12 队长朱成、阿里巴巴业务平台双 11 队长徐培德、阿里巴巴数据库双 11 队长陈锦赋与 InfoQ 主编王一鹏,一同揭秘了双 11 双 12 背后的数据库技术...行级存储能力。...“那这背后对于一个新的数据库产品类型的要求,实际上整个业界大家都是在探索阶段。” 写在最后 双 11 双 12 背后的数据库技术支持远不止于此。
一方面,天翼云借鉴国际国内灾备标准,进一步细化灾备指标,添加库级读写分离、表级双写双读、行级双写双读等能力,让数据库灾备标准更加优化,有法可依。...,可一键式完成相关高可用集群部署操作; 自动检测、自动切换,无需人工干预; 提供虚IP管理,主从库路由秒级切换; 相比国际标准,提供更细粒度容灾分级-库级读写分离、表级双写双读、行级双写双读能力。...按照国家卫健委的要求,热备或双活机制,应具备在紧急情况下第一时间进行快速切换的能力,确保系统故障整体恢复时间小于30分钟。 这一要求也达到了金融领域分布式数据库灾难恢复的能力标准。...正是基于金融级高可用能力,天翼云TeleDB从层层选拔中脱颖而出,成功实现了健康码系统主中心和双活中心的切换:当新增资源池间互联电路中断或出现双活中心整体故障时,主中心业务完全不受影响,数据库集群将自动感知到双活中心发生故障...天翼云TeleDB作为云服务“国家队”,不断加快关键核心技术自主攻关,走出了一条引领国产化数据库高速发展之路,其历经十年打磨出的天翼云TeleDB系列产品,核心技术完全自主可控,其容灾方案展现出的金融级高可用标准
作者 | 贾瓅园 金融行业作为国民经济的命脉和枢纽,对数据库有着极为严苛的要求。近年来,国产金融级分布式数据库迈上了发展的快车道,在多个领域不断取得新突破。...今天为大家带来腾讯云金融行业架构专家贾瓅园老师在金融级架构方面的分享,主题为“国产金融级分布式数据库在金融核心场景的探索实践”。...3 金融级分布式数据库架构探索 根据上述分析与要求,结合分布式数据库在金融领域的挑战与痛点,我们在金融级分布式架构体系方面进行了探索。...完善金融级整体解决方案,我们必须要在满足金融级监管要求的同时,满足金融客户各类建设特点,以抽象思路和通用化的设计回归到统一的数据库产品。 深入金融业务场景探索。 打磨高可用和稳定性。...创新金融 DB 级 SaaS 服务。以前述提及的数据迁移体系、运维模式、建设模式为例,它能否对未来的金融级厂商、客户提供专业的数据库金融场景服务,这些都需要我们不断地去创新和探索。
行业背景 银行业从最初的手工记账到会计电算化,到金融电子化,再到现在的金融科技,可以看到金融与科技的结合越来越紧密,人工智能、大数据、物联网、区块链等新兴技术改变了金融的交易方式,为金融行业的创新前行提供了源源不断的动力...同时互联网金融的兴起是一把双刃剑,带来了机遇的同时也带来了挑战。普惠金融使得金融的门槛降低,更多的普通大众参与到金融活动中,这让金融信息系统承受了越来越大的压力。...随着数据库瓶颈的凸显,进行分布式改造迫在眉睫。 数据库分布式改造的途径 数据库进行分布式改造主要有三种途径:分布式访问客户端、分布式访问中间件、分布式数据库。...分布式数据库总体架构 其实当前市面上的分布式数据库总体架构都是类似的,由必不可缺的三个组件组成:接入节点、数据节点、全局事务管理器。...分布式数据库如何实现PITR 数据库的PITR一般都是通过一个基础备份加上持续不间断的wal归档来做到的,这个基础备份可以是在线的,因为它并不需要数据库当时处于一致性状态,一致性可以通过replay redo
近日,由TWT社区主办的2021容器云职业技能大赛团队赛的冠军作品:《适用于大中型银行的云原生技术体系建设方案》中,Kube-OVN成为银行技术团队推荐的金融级云原生网络最佳实践。...本文部分节选自获奖作品中的网络方案叙述,从打造金融级容器云基建的出发点,为广大金融技术团队提供网络部分改造的路径参考。...兴业数金 系统运维工程师、林鑫 兴业数金 容器云工程师、王嵩阳 兴业银行 质量中心工程 转载来源:本文部分节选自“twt企业IT社区”公众号《适用于大中型银行的云原生技术体系建设方案》 大中型银行需要打造金融级容器云基建...总结 作为一款金融级云原生网络方案,Kube-OVN以成熟的OVS用作容器网络底座,通过将OpenStack领域成熟的网络功能平移到Kubernetes,融合了安全强化、智能运维、硬件加速等多方面的特性...在性能层面,Kube-OVN也具备金融级优异表现。通过Kube-OVN调优,可以实现和现有容器网络有同等流量性能。
金融科技(FinTech)是金融与科技的融合产物,目前已成为全球金融行业创新和竞争的制高点与主战场。业界一致认为,金融科技将在未来数年迎来战略发展机遇期,行业可能出现颠覆级的科技创新改变金融生态。...为此,深圳市地方金融监督管理局在今年发布的《深圳市扶持金融科技发展若干措施》中明确表示,"从 2022 年起,深圳市人民政府将每年举办金融科技节,期间将举办金融科技大赛、金融科技论坛和金融科技展。"...这是一场面向金融科技前沿领域,专为学生团队打造的世界级竞赛。...基于深圳市当下完整良好的金融科技生态,大赛倾力打造人工智能、区块链、金融产品经理三大赛道,多维挖掘高校学生的优秀金融科技创新成果,启思高校学生输出贴近金融科技企业需求的技术及产品解决方案。...值得一提的是,为贯彻落实深圳市金融科技节指导方针、营造深圳市良好的金融科技生态环境,在大赛决赛及颁奖环节还将举办“金融科技高校论坛”活动,特邀各位专家将围绕“金融科技”展开深度话题分享、圆桌对话,为金融科技领域的发展提供方法论与新思路
当时,腾讯有一款金融级的分布式数据库产品TDSQL,其业务场景和对数据库的可靠性要求,和银行场景非常类似。...微众银行和腾讯TDSQL团队合作,共同将TDSQL打造为适合银行核心场景使用的金融级分布式数据库产品,并将TDSQL用于微众银行的核心系统数据库。本文是对整个实践历程的总结。...从过往经验来看,当时除了oracle等少数传统的商业数据库,能满足金融级银行场景的数据库产品并不多。...1.TDSQL架构介绍 TDSQL是基于MySQL/Mariadb社区版本打造的一款金融级分布式数据库集群方案。...微众银行通过实践证明,TDSQL作为金融级的核心数据库,是完全胜任的。
金融行业作为国民经济的命脉和枢纽,对底层数据库的能力要求在不断提高。具有高性能、可扩展、高可用等特性的分布式数据库是金融行业数字化转型的重要支撑。...2 《金融级分布式数据库探索架构》 贾瓅园,腾讯云数据库行业架构专家 分布式数据库是基于业务与技术的需求和发展以及监管要求下,解决当下以及未来趋势发展等问题,更优更稳定地满足金融银行业发展的选择。...面对此背景和发展的时代,我们首先要满足高可用及双中心级以上容灾,这是银行或金融业对技术架构最基本的要求,在此基础之上要满足交易高频高效、低延迟的金融场景处理要求,再衍生到高吞吐能力。...基于多年的行业架构经验,贾瓅园从金融数据库实施角度出发,重点介绍了工作评估中的几个重要维度供参考。在实际应用过程中,应结合自身业务特点来评估维度的优先级。...结合银行业的特点,孙亮为大家分享了几点在金融应用中常见诉求。金融行业的应用软件最高优先级关注点就是稳定性,孙亮认为很多不太优雅甚至是不太合理的基础转型,其实都是考虑到优先稳定性的要求。
hrd7lij4yf.jpg] 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融级分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融级的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融级高可用。...第五点是企业级安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...三、TDSQL金融级特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。
实际上,腾讯推出的 TDSQL(TencentDistributed SQL) 金融级分布式数据库,在对内支撑微信红包业务的同时,对外也正在为中国金融行业技术自主可控分布式数据库解决方案 作为国内首家互联网银行...目前 TDSQL 已正式通过腾讯金融云对外输出金融级分布式数据库产品服务,除了微众银行,腾讯分布式数据库 TDSQL 还支撑着华通银行、华夏银行、潍坊银行、内蒙金谷农商银行、北京人寿、爱心人寿等众多银行和保险公司的互联网核心生产系统...由于 MySQL 的半同步和 Galera 模式不仅对性能的损耗是非常大的,而且数据同步有大量毛刺,这给金融业务同城双中心或两地三中心架构容灾架构带来了极大的挑战。 为什么会这样呢?...而在容灾能力方面,TDSQL 可以支持: 同城数据强一致下的双活:当前腾讯公有云和金融云有大量的客户都选择了类似方案。...,分析语法树中表的连接方式和连接字段,然后遍历语法树中的过滤,排序等关键字段,再次分析各字段的区分度,对于区分度较高的字段会提供推荐优化方案,综合字段区分度,过滤规则,表连接顺序等多个因素推提供优化建议
—数据驱动金融商业裂变”大型主题策划活动第一部分的文章/案例/产品征集部分;感谢 BoCloud博云 的产品投递 1、产品名称 BeyondContainer容器云平台解决方案 2、所属分类 金融科技•...平台已经在金融、能源等行业得到了广泛应用,帮助企业实现基于容器的应用持续集成和快速部署、秒级弹性伸缩、业务可用性保障等关键特性,帮助企业搭建基于容器的PaaS平台,以应对互联网时代业务快速发展的需要。...8、市场价值 加快金融机构产品上线周期,大大减少金融机构在IT产品上的投入成本,帮助金融机构快速实现互联网化转型。.../www.bocloud.com.cn/product_container.html 10、所属企业 苏州博纳讯动软件有限公司 - 企业介绍 - BoCloud博云(苏州博纳讯动软件有限公司),为企业级客户提供专业的云计算服务...公司自主研发的多项软件产品,包括私有云产品BeyondSphere、企业级容器管理平台BeyondContainer、数据中心自动化运维产品BeyondBSM等,已在金融、电力、政务、IDC等行业领域的生产系统中落地实施
分布式数据库在金融场景落地中,亟需解决金融业务面临的数据规模增长、数据结构多样化等难点。作为金融企业或金融行业从业者,如何在不同的应用场景下,做好分布式数据库的选型和落地?...随着近些年来分布式数据库的成熟,金融行业中已有成功案例投入生产系统使用。本次议题聚焦于数据库选型,分享实战中积累的金融行业数据库选型的思考及经验。...19:35-20:10《国产金融级分布式数据库在金融核心场景的探索实践》 分享嘉宾:贾瓅园 议题简介:从金融级场景到传统金融核心系统场景,在云化的技术浪潮下,国产分布式数据库得以应用在对数据库最高要求的金融行业实现应用...本次分享,将围绕“国产金融级分布式数据库在金融核心场景的探索实践”,与行业探讨当中的经验方案,并展望未来前沿实践方向。...20:10-20:45《金融应用对接分布式数据库》 分享嘉宾:孙亮 议题简介:金融系统在使用分布式数据库时,可能会遇到哪些问题?会面临哪些改造?会对数据库有哪些要求?
在金融行业海量数据的背景下,绝大多数企业都面临着数据库种类多、数量多等问题,企业亟需获得统一管理数据库的功能;同时,面对复杂的金融业务场景和数据,企业对 DBA 的要求也越来越高,也给数据库运维架构设计和优化带来挑战...企业在数据库智能运维方面有哪些经验可以借鉴?本次 DBTalk 技术公开课,我们将聚焦金融行业的数据库运维能力,结合最佳实践案例,解答上述问题。...议题介绍 19:00-19:40《金融级分布式数据库架构设计与对接实践》 分享嘉宾:田清波,腾讯云数据库专家工程师 议题简介: 在大力发展国产技术的时代背景下,银行业进行数字化转型和对安全可控数据服务的需求日益增长...一款的优秀国产分布式数据库应该具备什么样的表现?国产数据库在金融领域的落地应用成果究竟如何?...本次议题,将详细解读腾讯云 TDSQL 的分布式能力如何与金融行业运维体系对接,并分享在传统金融业务的核心系统快速构建企业级云数据库平台最佳实践。
然而,由于金融机构对业务连续性和数据准确性的严苛要求,传统头部金融机构始终没能有一家完成国产数据库全面迁移。...数据库由主备模式发展为支持两地三中心 多活部署,生产事件处理时长从小时级缩短到分钟级。 当我们回顾这一段历程,过程虽然艰辛,但积累了宝贵的大型金融机构国产数据库迁移实践经验。...PolarDB 技术架构 业务冲刺当天,互联网核心业务系统经过了三个性能压力高高峰时间点:12:00、17:00、21:00。...,以及更上一层楼的金融级高可用能力。...加入阿里云之前,在蚂蚁金服负责金融科技的商业推广和生态建设工作以及蚂蚁区块链的商业拓展工作;他在企业软件市场深耕多年,曾经创建 Pivotal 软件大中华区分公司,开创了企业级大数据以及企业级云计算 PaaS
image.png 第一章,产品简介以及适用场景 第二章,TDSQL架构分析及模块介绍 第三章,数据一致性保障 第四章,分布式TDSQL实践 第五章,数据同步与备份 一、TDSQL是什么:腾讯如何打造一款金融级分布式数据库...我们开始把这个高可用的数据库产品化。到2012年,TDSQL的雏形就已经出来了,作为一款内部产品,开始在公司内部提供金融级的数据强一致性、可靠性服务。...在金融场景,你没有办法去估量——假如错一条数据,到底这条数据是1分钱还是1个亿,所以数据强一致是我们最根本的一个特性。不允许丢,不允许错,这是对数据库起码的要求。 第二是金融级高可用。...第五点是企业级安全。金融数据是敏感的,一些敏感的金融数据需要在当前数据基础上再做一层更高级别的企业安全防护,比如数据库防火墙,以及透明加密,等等。...四、TDSQL金融级特性之:数据强一致性保障 前面我们了解了TDSQL的整体架构和核心特性。接下来我们要重点聊一聊它最重要的特性——作为金融场景下不可或缺的数据强一致性的保障。
作者 | 蚂蚁金服技术专家 沧漠 导读:Kubernetes 的出现使得广大开发同学也能运维复杂的分布式系统,它大幅降低了容器化应用部署的门槛,但运维和管理一个生产级的高可用 Kubernetes 集群仍十分困难...这套面向终态的集群管理系统在今年备战双 11 过程中,经受了性能和稳定性考验。 一个完备的集群管理系统除了保证集群稳定性和运维效率外,还应该提升集群整体资源利用率。...A4:Node 监控分为硬件、系统级、组件级,硬件监控数据来自 IDC,系统级监控使用内部自研监控平台,组件(kubelet/pouch 等)监控我们扩展 NPD,提供 exporter 暴露接口给监控系统采集...A9:一个集群可以管理万级节点,所以元集群理论上可以管理 3K+ 业务集群。 Q10:节点如果遇到系统内核、Docker、K8s 异常,如何从软件层面最大化保证系统正常?
2016年,“同城双活”架构落地。11月,首次成功参加“双11”大促。...2017年,全面应用国产分布式数据库OceanBase,在银行业界率先实现了100%去IOE和自主可控;同年,全面建成数据库“三地五中心”架构,城市级别灾难RPO为0。...2018年9月,网商银行与蚂蚁区块链合作的“双链通”供应链金融平台上线。当年获得《金融电子化》杂志社颁发的2018年度金融行业“产品创新突出贡献奖”。...在数字化时代的当下,金融需求出现了场景化、碎片化、多样化、长尾化、普惠化的新特点,百年未有的变化冲击着传统金融级IT架构。 新金融级IT架构应该包含什么样的新能力? 关键挑战是什么?...活动方式:关注下方“博文视点Broadview”公众号,在后台回复“金融架构抽奖”参与活动,届时会在参与的小伙伴中抽取1名幸运鹅! 活动时间:截至8月12日(周四)开奖。
提起数据库一直是中国企业级市场无法抹去的伤痛,无论是去IOE还是去SOA,大家都认为数据库是中国企业最无法去除的。而国内管理软件厂商为了实现这一战略,不断寻求并购来实现去除数据库的使命。...而随着大数据地位的与日俱增,加上非关系型的数据库的兴起,原有关系型数据库已很难适当的市场变化疲态尽显。 据国外研究机构五月份最新的数据库排名来看,非关系型数据库增长明显。...未来几个月在这前十名将会动荡不断,非关系型数据有望继续扮演杀手角色冲击关系型数据库的地位。 ? 而本期我们将推荐国内非关系型数据库厂商巨杉数据库。...创始人背景: 由前IBM DB2数据库北美实验室的开发团队创建。 IBM DB2数据库是关系型数据库中为数不多的分布式数据库(MPP Database),从架构上看比较接近新一代数据库的“分片”机制。...新型分布式数据库未来方向 MySQL:在2008年以10亿美元被SUN收购,而分布式数据库MongoDB在2013年估值12亿美元,MongoDB用了2年多的时间,创造了分布式数据库的神话,并且在大数据时代
上述方案确保了TDSQL无任何数据异常,且具备高性能的可扩展性,解决了分布式数据库在金融级场景应用的最核心技术挑战,使得国产分布式数据库实现在金融核心系统场景的可用、好用,进而推动国产基础软件产业化。...腾讯云数据库TDSQL诞生自腾讯内部百亿级账户规模的金融级场景。...在经过公有云的海量数字化、大规模高并发业务场景打磨以及内核级的深度自研优化后,TDSQL逐渐形成标准化的国产分布式数据库产品,包括金融级分布式TDSQL、计算与存储分离的云原生数据库TDSQL-C 等产品...金融级高可用:确保99.999%以上高可用;跨区容灾;同城双活;故障自动恢复。 高性能低成本:软硬结合;支持读写分离、秒杀、红包、全球同服等超高性能场景。...作为领先的国产分布式数据库,TDSQL针对新型企业级信息化以及快速实现国产化的转型升级需求,具备数据强一致、金融级高可用、高性能低成本、线性水平扩展、企业级安全、便捷智能运维等核心特性。
期刊:arXiv, 2018年1月18日 网址: http://www.zhuanzhi.ai/document/a7587f12fdf1318cc67016caa31fc9bd 2....The Case for Automatic Database Administration using Deep Reinforcement Learning(基于深度强化学习的自动数据库管理) --...Reinforcement Learning based Recommender System using Biclustering Technique(基于强化学习的双光技术推荐系统) ---- --
领取专属 10元无门槛券
手把手带您无忧上云