本文作者:sevenyjluo ,腾讯 CSIG 前端开发工程师 很多业务都需要进行运营数据统计,如统计用户数、调用量等等。相较于传统方式,在拥抱云计算的大潮下,如何借助腾讯云上 PAAS 产品无服务云函数 SCF(Serverless CloudFunction),云数据库(MySQL),以及结合报表可视化工具"小马 BI"(https://xiaoma.tencent.com/#/),来快速开发我们的运营报表呢? 效果展示、架构介绍 运营日报的整体架构如下: 简单概括下,就是通过云函数的定时触
为帮助开发者更好地了解和学习前沿数据库技术,腾讯云数据库特推出"DB · TALK"系列技术分享会,聚焦干货赋能创新,邀请数十位鹅厂资深数据库专家每月和您一起深入探讨云数据库的内核技术、性能、架构、管理运维和最佳实践等。 3月30日第一期分享会“数据库管理与运维”专场已结束,本期带来各讲师分享精华及直播回顾视频。想要讲师ppt的小伙伴,可在腾讯云数据库公众号后台发送"3.30讲师课件",即可获得讲师课件哦! 迁移利器DBbridge 技术实现原理 ——程学飞,腾讯云数据库高级产品经理 DBbridge软件的
👆点击“博文视点Broadview”,获取更多书讯 项目早期无论是从成本考虑,或者是业务模型考虑,往往难以估量长期的业务变化发展,尤其是数据库的扩容,项目的设计成员往往会单纯得以为,等到数据量膨胀以后,直接扩容数据库的规格,通过堆硬件的方式来解决数据库负载的问题。 在笔者的从业经验来看,这样的思想几乎是行业的“主流思想”,这也无可厚非,从业务角度,底层做得越透明,往往是越成功的。但从数据库的角度来看,单纯的堆硬件扩容依然存在非常大的性能隐患。 如果早期的时候,使用了8C 16G的RDS规格,以支撑1w Q
2022年6月7日,北京时间11:30,随着高考第一场科目语文考试结束,全国各地的高考作文题也正式在公众面前“登台亮相”。今年全国乙卷的高考作文题目是“跨越,再跨越”,双奥之城闪耀世界,两次奥运会展示了我国综合国力的跨越式发展,同期腾讯云数据库也实现了从儿童向有为青年的跨越。 卓越永无止境,跨越永不停歇。腾讯云数据库在跨越、再跨越的国产化路上,历经十八载,交出了自己的答卷。 1978年,萨师煊老师在黑板上写下“数据库”三个字,数据库理论正式进入中国。如今国产数据库已经走过了整整44年。从上世纪八九十年代,国
日前,腾讯云数据库开源产品TDSQL PG版(开源代号TBase)宣布推出重磅升级——经过一年半的打磨,上万张表访问场景下,内存占用节省60%;查询性能提升百倍;SQL语句兼容性增强。同时,大力提升原有数据库版本在分布式场景下的易用性。 TDSQL PG版是一款具备HTAP能力、经过腾讯多年持续投入研发的数据库产品,是腾讯云数据库团队在开源的 PostgreSQL 基础上研发的企业级分布式HTAP数据库管理系统,能够提供成熟的一站式解决方案。腾讯云数据库技术总监李跃森介绍到,“在首次开源的10天内,TD
好消息!国际权威行业研究与咨询机构Forrester发布全球Translytical数据平台厂商选型报告《The Translytical Data Platforms Landscape, Q3 2022》,腾讯云数据库成功入选。 Forrester是全球最具影响力的独立第三方研究咨询公司之一,提供与市场相关的研究洞察、市场趋势和最佳实践,帮助客户了解市场动态、扩展视野、制定战略。本次发布的报告基于Translytical 数据平台市场,通过考察厂商的规模、产品类型、地理位置和用例重点,为企业决策者、技术
5月11日,第七次全国人口普查结果公布。 国家统计局总统计师曾玉平在发布会直播中表示:“普查数据质量是普查统计工作的生命线……利用信息化,对普查方式进行创新:首次全面采用电子化,实时及时上报数据;首次实现普查对象通过互联网自主填报;首次利用行政大数据进行比对核查;首次实现利用互联网云计算云服务实时处理工作;首次用信息化系统对700多万普查员进行线上管理。” 腾讯云在背后为第七次全国人口普查保驾护航。据统计,在该项目中,腾讯云数据库支持了十亿级用户数据、七百万个终端和百万级峰值TPS(每秒事务处理量)。 一
作者介绍:鲁越,腾讯云数据库架构师团队负责人,主要负责腾讯云数据库MySQL、Redis、Oracle等数据库售前架构、运维、调优等工作,曾就职于网易和尼比鲁。
熟悉BI可视化的同学都知道,现在企业届常用的BI工具主要是Power BI、FineBI、Tableau等,其中以Tableau可视化功能最为突出,做出来的图表非常好看。
近日,2023 中国国际金融展“金鼎奖”评选结果公布,腾讯云数据库TDSQL凭借在金融行业的解决方案、技术领先性和大量应用案例脱颖而出,荣获“优秀网信产品基础软硬件奖”,这代表业界对于TDSQL在金融行业技术创新和应用价值的肯定。
云与分布式是数据库发展的两大趋势,那云时代下新一代数据库会是什么样的呢?腾讯云数据库专家工程师窦贤明讲师给大家分享了自己的畅想,基于冷热分级存储与ServerlessDB结合的新一代数据库。基于腾讯云数据库TDSQL-C PostgreSQL在云原生这条路上的一些探索,重点从Serverless 数据库和分级存储(冷热分离)的设计与实现两个方面进行分享。内容主要分为四个部分: 第一部分:介绍云时代的数据库的背景; 第二部分:探讨云上数据库进化的逻辑是什么、方向是什么; 第三部分:描述Serverless数
在云计算越来越火的今天,我们不难预测,云上的MySQL在未来的数据库市场也将是主流。 在很多人的理解中,云托管数据库服务是“暴利”。 而实际上,在这个海量数据大爆发的时代,开源版本的MySQL很难满足很多企业的业务需求,在某些场景下,无论是性能、安全还是稳定性,都面临着各种各样的问题,产品能力不足的云数据库MySQL也很难在竞争激烈的市场找到属于自己的舞台。 上周的一篇文章数据君分享了近期腾讯云MySQL入选顶会的故事,这一期想和大家谈谈,在应用场景下,这帮人又做了哪些事? 回顾腾讯云数据库MySQL的
导语 | 随着数字化转型的深入、移动互联网的蓬勃发展,产生了大量以语音、图像、视频为代表的非结构化数据,这些数据越来越得到人们的利用,使得越来越多的 NoSQL 产品不断涌现,助力企业创新业务落地,赋能业务快速发展。今天,我们特邀微众银行数据库平台负责人、腾讯云 TVP 胡盼盼老师为我们带来《金融场景下的 NoSQL 实践:微众银行 Redis 应用实践》的主题演讲,他将带我们了解微众银行在 Redis 上的开发和运维实践。
数据库与操作系统、中间件是计算机基础的三大软件。 “缺芯少魂”之痛常让人为国产操作系统的不足捏一把汗,而数据库却更像藏在水面之下的冰山,甚少有人关注。现在,市场上显现出了一些新的变化,国产数据库已经迈出了通往快速路的第一步。 数据库,即数据管理系统,诞生于20世纪60年代中期的美国,可以被看作是电子化的文件柜。与国外厂商的诞生时间和发展速度相比,我国数据库处于相对落后状态。20世纪80年代,数据库老大哥甲骨文最早进入内地市场时,国外数据库已经迭代了超过7个版本。 那时,操作系统、中间件、数据库都在尝试国
作者简介:崔秋,PingCAP 联合创始人,重度开源爱好者,曾任职于搜狗、豌豆荚,长期从事广告系统基础组件相关的研究,现主要从事开源 NewSQL 数据库 TiDB/TiKV 相关的设计和研发工作。
官方MySQL 8.0 是非常大的版本,以前的版本号是 5.6、5.7,现在一下飞跃到 8.0,对于 Oracle MySQL官方来说也是非常大的版本,有很多的更新。
3月16日,由腾讯云云+社区主办的腾讯云自研数据库 CynosDB 交流会在北京圆满落幕,本次交流会全方位解读了CynosDB,揭秘技术内幕,解读兼容两大主流开源数据库的一主多读架构、高可用架构及快速恢复实现、可计算智能存储和分布式存储。
本方案结合腾讯云 CKafka、流计算 Oceanus、私有网络 VPC、商业智能分析BI等,对视频直播行业数字化运营进行实时可视化分析。分析指标包含观看直播人员的地区分布、各级别会员统计、各模块打赏礼物情况、在线人数等。
2022年是魔幻年,2.24号,在外面爬雪山团建,谈着刚刚打响的俄乌战争。4月招聘一位上海员工,但因为疫情管控只能远程报到,杭州亚运会也被迫推迟,随后几个月大家都笼罩在阴影中,唯有世界杯带来了快乐,但原计划12.18号一起看决赛,没想到公司瞬间阳了一半,看球活动也被迫取消。好在疫情快速消停,和家人度过一个大团圆春节。
👆点击“博文视点Broadview”,获取更多书讯 10月重磅新书来袭 本期书单为大家带来的是10月份的那些重磅好书! 这其中不仅有爆款书《码农翻身》作者、“对比Excel系列”图书作者等再次为大家带来的新作,还有阿里云智能数据库事业部总负责人李飞飞博士领衔撰写的云原生数据库首著、来自华为的AppGallery Connect Serverless平台经验总结、百度学院指定用书等大厂一线支持的专业技术著作,更有比武侠小说还精彩的中国移动互联网正史,希望能够带大家在提升专业技能的同时打开格局、放松身心~~
“力争让每一张钱都能打上TDSQLinside的标签”,距离潘安群在自己的朋友圈立下的这个flag,已经6年。 8月26日,在看到相关新闻之后,激动之余的老潘在朋友圈这样写道: “2016年第一次去人行立下的flag,今年要实现了”,并且附上了6年前的朋友圈截图,下面是众多同事和领导的感叹和祝福。 我们素人无法理解一个技术老兵对于TDSQL的溺爱,就像我们无法理解年轻人对于爱情有多么渴望。 这一天,距离老潘等第一次去现场技术交流,已经过去整整2190天。 硬着头皮也要往前冲 “我们要做就要做一款无愧于这个
3月16日,由腾讯云云+社区主办的腾讯云自研数据库 CynosDB 交流会在北京圆满落幕,本次交流会全方位解读了CynosDB,揭秘技术内幕,解读兼容两大主流开源数据库的一主多读架构、高可用架构及快速恢复实现、可计算智能存储和分布式存储。 关注腾讯云数据库官方微信,回复“0316”,即可下载本次交流会的全部PPT。 本文为腾讯云数据库高级工程师樊伟分享的《CynosDB可计算智能存储揭秘》现场实录。活动其他4位嘉宾分享内容将持续推送,请保持关注腾讯云数据库官方微信。现关注立得10元腾讯云无门槛代金券,体验
本来说好的2021会有一个好开局,似乎又出了点问题。 年关将近,现在疫情反扑,部分小区甚至全部隔离,为了安全着想,近期返乡还要求提供7日内核酸监测。作为普通人,我们除了戴好口罩,不乱跑,还能干点啥? 要知道这个,我们需要理解疫情是如何传播,防控是怎么进行的。 病毒通过黏膜感染,飞沫传播,由于病毒可以在体外存活一段时间,因此甚至可以间接传播。 传染病的预防措施包括消灭传染源,切断传播途径和保护易感人群。由于新冠肺炎的潜伏期不短,感染特征也不算明显,因此实际情况会复杂些,因此我们需要核酸检测、隔离、健康码。
为更好的帮助DBA运维数据库,腾讯云将于每月12日在社群直播开展DBbrain诊断日,腾讯云高级产品经理迪B哥直播解析经典数据库运维难题,结合腾讯云数据库智能管家DBbrain的能力,为大家提供问题优化思路和方法,玩转数据库! 本期诊断日主要分享内容:如何使用智能管家DBbrain解决MySQL实例CPU使用率过高的问题? 1 前言 在使用MySQL的过程中,经常会遇到由于数据库性能问题导致的业务故障。对于研发、运营、产品等非运维职能的同事来说,往往更愿意请DBA来协助定位问题和优化。如果公司确有DBA
DTS 作为数据交互引擎,以其高效的实时数据流处理能力和广泛的数据源兼容性,为用户构建了一个安全可靠、可扩展、高可用的数据架构桥梁。云数据库 SelectDB 通过与 DTS 联合,为用户提供了简单、实时、极速且低成本的事务数据分析方案。用户可以通过 DTS 数据传输服务,一键将自建 MySQL / RDS MySQL / PolarDB for MySQL 数据库,迁移或同步至云数据库 SelectDB 的实例中,帮助企业在短时间内完成数据迁移或同步,并即时获得深度洞察。
今年6月,腾讯云数据库TDSQL PG版 Oracle兼容能力以及TDSQL-A两大引擎全新升级,Oracle兼容性和海量数据查询分析能力再上新台阶。为帮助开发者更清楚的了解到腾讯云数据库究竟做了什么,特推出"DBTalk数据库企业级能力国产化”专场,就数据库引擎在Oracle兼容核心能力构建、海量数据分析引擎构架设计、下一代列式存储原理、复杂查询执行优化等方面进行深入解读。 本期带来各讲师分享精华及直播回顾视频。想要讲师ppt的小伙伴,可在腾讯云数据库公众号后台发送"610讲师课件",即可获得哦! 《深入
文章出处: 鹅厂架构师 2021年6月26日,腾讯云【TECHO】HUB技术巡回长沙站顺利开展,聚焦于数字媒体行业的云端实践。会上,腾讯云数据库高级工程师窦贤明重点分享了《腾讯云云原生数据库TDSQL-C——云上应用研发方式的改变》。由此,我们一起来看传统主备方式数据库与云原生数据库的对比演进。 (传统的读写分离) 传统数据库主备方式: 存储各自独立 主备间通过数据流复制保证数据一致,主库故障则切换到备库 可用性与可靠性无法兼顾 (云原生数据库计算存储分离) 腾讯自研云原生数据库 TDSQL
近年来,在国内数字化转型以及信创建设持续推进的大背景下,我国信创产业发展持续加速,数据库国产化替代速度加快,行业迎来前所未有的发展机遇。
整理 | 田玮靖 出品 | CSDN(ID:CSDNnews) 当前,新一轮科技革命使得数据规模爆炸性增长、数据类型愈发丰富、数据应用快速深化,同时,云数据库、HTAP数据库、AI向量数据库等物种的出现,为数据库领域带来了新的技术难题和业务痛点。如:分布式中的一致性,那么多数据一致性模型,到底有什么不一样?如何保障数据安全与业务稳定发展?云数据库有哪些关键技术,怎么实现?“多云共存”,怎么进行数据库管控? 以上问题有你正在关注、疑惑的地方吗?不妨看看国内大厂都是如何解决诸多难题的吧。 10月23-24日,第
微信小程序是一个可以在微信上打开的轻应用,他是由多个页面组成的程序,跟传统APP比较如下:
Growth Hacking这个词在过去一两年开始迅速从硅谷传播到国内,也诞生了一系列专注于企业数据分析业务的明星初创公司,如GrowingIO,神策数据,诸葛IO等。Growth Hacking简单的来说就是用数据驱动的方式来指导产品的迭代改进,以实现用户的快速增长,可以看看上面几家数据分析公司披露的客户就知道它有多流行了: GrowingIO客户:有赞,豆瓣,36Kr等 神策数据客户:秒拍,AcFun,爱鲜蜂,pp租车等 诸葛IO客户:Enjoy,罗辑思维等 我司的一个主要产品是面向中小诊所的运营S
自从AlphaGo赢了之后,人工智能就变得非常热门了。不过,大家在关注“智能”时,却很少把注意力放在“人工”上,似乎感觉上了人工智能之后,一切都能自动化了。其实,这份智能的背后有着大量的“人工”,还有相当多不能自动化的事情。 这里的"人工"主要体现在两个方面: 1. 数据准备 现代的人工智能技术,或者说机器学习,其基本方法和N多年前的数据挖掘并没有什么太大的不同,也还是将大量数据喂给计算机用于训练模型,模型生成之后就可以用于自动化处理,看起来就像有了智能。 然而,用于实际业务的机器学习项目,并不像Alph
在助力企业数字化转型的共同目标下,越来越多的服务商正走向更加紧密的合作。而面对海量数据爆发式的成长,以往单一的SaaS产品很难直接满足企业的业务需求,在某些场景下,无论是性能、安全还是稳定性,都面临着各种各样的问题。 日前,拥有多种企业特性的微盟SaaS工具却屡次获得用户认可,这是怎么做到的?以下将带来微盟余成真先生的分享实录: 微盟做为中国领军企业云端商业及营销解决方案SaaS提供商,现有员工超过1万人,入驻商户超过300多万家,在商业产品这块SaaS类云产品,能够为用户提供精准营销服务。 SaaS是
2020年7月8日,腾讯云正式发布了腾讯云MySQL 8.0。MySQL 8.0版本是一个里程碑式的版本,官方版本大幅度的提高了性能和可用性。而腾讯云基于官方版本发布的腾讯云MySQL 8.0版本,更是在官方版本之上,进一步优化,大幅度提高性能。
来源:润乾软件 作者:蒋步星 编辑:刘晴敏 本文字数为2219字,建议阅读6分钟 本文由蒋步星讲述了报表性能优化的问题。 应用系统中的报表,作为面向业务用户的窗口,其性能一直被高度关注。用户输入参数后都希望立即就能看到统计查询结果,等个十几二十秒还能接受,等到三五分钟的用户体验就非常恶劣了。 那么,报表为什么会慢,又应当从哪里入手进行性能调优呢? 数据准备 当前应用中的报表大都用报表工具开发,当报表响应太慢时,不明就里的用户就会把矛头指向使用报表工具的开发人员或者报表工具厂商。其实,大多数情况
使用外部数据分析工具,比如百度Sugar,连接草料二维码官方数据库,即可制作自定义可视化报表。本文会具体介绍订单工序流转报表的制作流程。
大数据前几年各种概念争论很多,NoSQL/NewSQL,CAP/BASE概念一堆堆的,现在这股热潮被AI接过去了。大数据真正落地到车联网,分控,各种数据分析等等具体场景。 概念很高大上,搞得久了就会发现,大部分都还是数据仓库的衍伸,所以我们称呼这个为“新数仓”,我准备写一系列相关的文章,有没有同学愿意一起来的?请联系我。前面有一些相关文章,大家可以看看: 新数仓系列:Hbase周边生态梳理(1) 本文简单梳理下其中一个应用比较广的HBASE的国内开发者现状,可能不全,有更多信息或者纠正的,请给我留言。 1
导语 | TDSQL-C 为了满足更高的弹性能力和更精准的计费能力要求,推出了 Serverless 实例的形态,为用户提供更低成本、更灵活的云数据库服务。本文由腾讯云 TDSQL-C 高级工程师杨珏吉在 Techo TVP 开发者峰会 ServerlessDays China 2021 上的演讲《突破极致弹性-腾讯云原生数据库 TDSQL-C Serverless 架构设计与实践》整理而成,向大家分享 TDSQL-C Serverless 的特点以及实现原理。 点击可观看精彩演讲视频 一、Serv
小编收集了过去一段时间内腾讯云云监控官网客服小助手收到的最最频繁的一些问题,整理到一块,统一为大家解答,希望对大家有帮助。 01. 什么是云监控 简单说,各云产品都会有一些指标来衡量它的运行情况,用户可以通过云监控的能力对这些指标可视化展示,实时监控,及时了解云产品监控状态。当然,云监控也不仅仅是用来帮助了解云产品,同样也可以用来监控基于云的服务,这些未来我们慢慢再说~ 更加通俗易懂的解释参考上篇科普文:云监控新手入门 02. 什么是基础监控 基础监控(Basic Cloud Monitor)是
来源:数据蒋堂 作者:蒋步星 本文长度为2240字,建议阅读5分钟 本文通过剖析存储过程的优点,探查存储过程的潜在风险及应用场景。 存储过程是数据库领域中应用非常广泛的技术,关于它的利弊讨论由来已久,我们这里针对存储过程的两个公认度较高的优点进行剖析,从而更清楚存储过程的潜在风险及应用场景。 存储过程利于界面与逻辑分离! 界面与逻辑分离是现代应用开发的一个基本准则。相对于后台数据处理逻辑,界面会有更多样性的环境,如PC、手机等,而且业务稳定性也不强,经常会改。如果能把两者分离,开发和维护界面时绑着数
来源:数据蒋堂 作者:蒋步星 本文长度为1168字,建议阅读4分钟 本文通过剖析数据库的现状,探查怎样看待存储过程的移植困难问题。 存储过程移植困难是经常被诟病的,在罗列存储过程的缺点时,这一条几乎从来不会被遗漏。 存储过程的移植确实很困难,一般业务逻辑复杂到需要写存储过程的地步,总会不可避免地用到数据库独有的特性和语法,更换数据库时这部分代码就需要重写。如果只是简单地替换函数名和参数规则(如日期转换等),那成本还不高;如果用到了新数据库不支持的某种特性(如窗口函数),那还要重新设计算法来编写计算
12月16日,在刚刚发布的 Gartner® 2022年度《云数据库管理系统魔力象限》研究报告中,腾讯云数据库进入特定领域者(Niche Players)象限。同时,据Gartner云数据库管理系统运行用例关键功能报告,腾讯云数据库在OLTP(TDSQL/TDSQL-C)及轻量级TP能力(KeeWiDB)得分均为国内第一。 根据Gartner云数据库管理系统运行用例关键功能报告,腾讯云数据库TDSQL在OLTP事务、轻量级事务和增强事务三个用例中得分均高于3.0(总分5分,3分以上代表满足要求),其中O
现在“大数据”非常的火。我们看到有各种相关的技术文章和软件推出,但是,当我们面对真正日常的业务时,却往往觉得无法利用上“大数据”。初步想来,好像原因有两个:第一个原因是,我们的数据往往看起来不够“大”,导致我们似乎分析不出什么来。第二个原因是,大数据往往其作用在于“预测”,比如给用户推荐商品,就是通过预测用户的消费倾向;给用户推送广告,局势通过预测用户的浏览习惯。然而很多时候我们要的并不是预测,而是弄明白用户本身的情况。 对于业务中产生的数据,一般我们期望有几种用途:一是通过统计,用来做成分析报告,帮助人
最近在 NC 呆了一段时间,公司的PG 使用量是蛮大的,库的使用量不小,单表的数据量在100多G的也比较多,数据库也都是上T 的规模。问题主要在数据量大,PG数据库使用的方式有一些问题,当然这个和业务逻辑因素以及数据库上下游的数据需求都有关。
各个图表中的数据互相关联,互相约束。比如:我想看销售部的数据,点击饼图中的一部分,其余图表会自动筛选出相应的数据!
“如果说中小企业是一片片沿溪而耕的农田,那么我们的愿景就是建一座大坝来管理好上游的水资源,来灌溉下游企业。” 腾讯云数据库高级工程师杨珏吉说这是他投身数据库领域的初衷。初创企业、中小企业在数据库层面的最大需求就是低成本。助力企业降本增效是腾讯云数据库一直在努力的方向,尤其在疫情冲击下的经济社会中,更是一份社会责任。 在技术上深研,突破极致弹性,让客户像使用自来水一样的使用数据库,用多少、怎么用由客户决定,计费由使用量决定,这是杨珏吉及其团队给出的答案。TDSQL-C Serverless 数据库通过使用计算
摘要 服务化在云计算中是非常重要的部分,所有组件以服务的方式去提供,而很多企业的数据库都还在构建当中。今天聊的就是私有云数据库构建的过程。如果大家有这方面的打算希望能够提供一些参考。 为什么需要DBa
当前,云原生数据库Serverless化已成为云数据库的重要演进方向。9月7日,在2023腾讯全球数字生态大会云原生数据库技术演进与实践专场上,腾讯云分享了在该领域的多项前沿探索和核心技术解析,并重磅发布云原生数据库TDSQL- C Serverless 2.0版本,为广大企业运用云原生数据库提升业务能力提供了有效参考。
本文共2282字,建议阅读7分钟 本文为大家解读结构化数据的前沿动态。 [导读]数据库是当前数据分析中最重要的数据存在形式,但受其封闭性和关系代数四十年没有关键性发展等影响,现今很难满足多数据计算量的计算需求。演讲嘉宾蒋步星将针对结构化数据常见的集合和有序运算以及大数据计算等实际业务需求,分析探讨关系代数在描述和实施计算时面临的困难,研究结构化数据的计算特点后提出更有适应性的计算模型,并进一步形成更有开放性的计算能力提交方案,最后再简单分享对新一代数据仓库的展望。 本讲座选自润乾软件创始人蒋步星于2
领取专属 10元无门槛券
手把手带您无忧上云