引言 虎牙是中国第一家上市的游戏直播公司,旗下产品包括知名游戏直播平台虎牙直播、风靡东南亚和南美的游戏直播平台NimoTV等,产品覆盖PC、Web、移动三端。其中,游戏直播平台虎牙直播月活达1.5亿。 如何借助于海量业务数据将全平台的优质内容与终端用户更智能、高效地连接起来,为公司运营和业务发展提供更为有效的数据能力支撑,是虎牙大数据团队(下面简称虎牙)过去和未来一直需要深入思考和探索的重要使命。为了达成以上愿景,虎牙选择与腾讯云EMR团队合作,接入大数据云端解决方案。 本文将通过案例解读,带大家深入了
虎牙是中国第一家上市的游戏直播公司,旗下产品包括知名游戏直播平台虎牙直播、风靡东南亚和南美的游戏直播平台NimoTV等,产品覆盖PC、Web、移动三端。其中,游戏直播平台虎牙直播月活达1.5亿。
作者 | 蔡芳芳 采访嘉宾 | 陈龙 2020 年 9 月,主打云数据仓库产品的硅谷独角兽 Snowflake 正式登陆纳斯达克,首日 IPO 筹资高达 33.6 亿美元,是有记录以来金额最大的软件 IPO,突破了 Uber 2019 年 5 月上市创下的最大规模纪录。 如今,大数据技术早已进入普及期,数据仓库 / 分析领域更是巨头林立,既有传统厂商 Oracle、Teradata,也有开源软件 Hadoop,还有云厂商 AWS Redshift、Google Bigquery,在这样一个竞争环境下
2020 年 9 月,主打云数据仓库产品的硅谷独角兽 Snowflake 正式登陆纳斯达克,首日 IPO 筹资高达 33.6 亿美元,是有记录以来金额最大的软件 IPO,突破了 Uber 2019 年 5 月上市创下的最大规模纪录。 如今,大数据技术早已进入普及期,数据仓库 / 分析领域更是巨头林立,既有传统厂商 Oracle、Teradata,也有开源软件 Hadoop,还有云厂商 AWS Redshift、Google Bigquery,在这样一个竞争环境下,成立于 2012 年的 Snowflake 能脱颖而出实属不易。那么,Snowflake 在数仓技术方面有哪些独到之处?其成功的背后又有哪些技术原因和趋势值得关注?
“ 雁栖学堂-湖存储专题直播是腾讯云主办的国内首个湖存储百科知识直播节目,是一个围绕湖存储技术领域,基于存储加速服务,覆盖了前沿趋势,时事热点,客户案例,大咖分享,开发者成长路径等内容的直播交流平台。 ” 雁栖学堂-湖存储专题直播第三期将邀请到腾讯云存储高级工程师“严俊明”,介绍GooseFS:元数据加速能力篇。 分享内容 本次分享会通过对传统大数据分析的优劣势进行深入分析,探讨云时代大数据分析发展阶段及趋势,以及云原生环境下腾讯云存储如果应对大数据分析所面临的元数据性能挑战。 分享大纲 元数
QQ音乐是腾讯音乐旗下一款领先的音乐流媒体产品,平台打造了“听、看、玩”的立体泛音乐娱乐生态圈,为累计注册数在8亿以上的用户提供多元化音乐生活体验,畅享平台上超过3000万首歌曲的海量曲库。优质服务的背后,是每天万亿级新增音乐内容和行为数据,PB数据量级的数据计算服务。
腾讯云升级发布新一代云数仓产品 CDW ClickHouse,万亿规模数据分析毫秒级响应 6月28日,腾讯云重磅发布了全新升级的全托管数仓产品CDW-ClickHouse,该版本首次填补了原生ClickHouse后续扩容的技术空白,相较Hadoop生态体系有高达10倍乃至100倍的性能提升,支持万亿规模数据毫秒级响应,可为用户提供在海量数据实时分析场景下的极速体验。 腾讯云 CDW ClickHouse 升级发布 现阶段,千行百业都在积极利用大数据能力进行数字化升级,这也对大数据技术提出了更高要求。但目
导语 | 近几年炙手可热的云原生首先由Matt Stine提出并延续使用至今,但其并没有标准的、严格的定义,比较公认的四要素是:DevOps、微服务、持续交付、以及容器,更多的则是偏向应用系统的一种体系架构和方法论。那么在云上如何改进大数据基础架构让其符合云原生标准,同时给企业客户带来真真切切的数据分析成本降低和性能保障是一个开放性的话题。本文由腾讯专家工程师、腾讯云EMR技术负责人陈龙在 Techo TVP开发者峰会「数据的冰与火之歌——从在线数据库技术,到海量数据分析技术」 的《云原生环境下大数据基础技术演进》演讲分享整理而成,与大家分享和探讨在云上如何实现存储计算云原生,以及未来下一代云原生大数据基础架构。
腾讯云大数据产品中心副总经理雷小平表示:“伴随着企业对于数据洞察敏捷度要求的不断提升,腾讯云正在不断探索更智能、更灵活、更高性价比的大数据工具。我们看到,数据湖架构已经成为在数据智能时代的新趋势,而云是数据湖最佳的实践场所。腾讯云原生智能数据湖将助力各行各业解决多元化数据分析场景的新需求,更好地激发大数据在企业数字化升级过程中的价值。”
作者:陈龙 腾讯专家工程师、腾讯云EMR技术负责人 |导语 在金融行业IT系统国产化的大背景下,国内金融行业开始推动IT基础设施国产化,逐渐摆脱对于传统IOE架构的依赖。微众银行自成立之初,就放弃了传统IOE架构路红,结合腾讯金融级分布式数据库TDSQL,建立了基于DCN单元化架构模式的分布式基础平台。如今这套架构承载了微众银行数亿级别的用户规模,数百套银行核心系统,和每天数亿次的金融交易。 近几年炙手可热的云原生首先由Matt Stine提出并延续使用至今,但其并没有标准的、严格的定义,比较公认的四要
来源|腾讯SaaS加速器二期项目-神策数据 继神策数据正式成为北京市信创工委会成员单位后,近日又正式获批成为国家级信创工委会成员单位。这是信创工委会对神策数据在大数据分析与营销科技领域的充分肯定与认可! 中国电子工业标准化技术协会信息技术应用创新工作委员会(简称“信创工委会”)成立于 2016 年 3 月,是由从事软硬件关键技术研究、应用和服务的单位发起建立的非营利性社会组织,其宗旨在于发挥产业组织和行业自律(市场规范运作、有序竞争)方面的作用,为应用推广工作提供技术、标准、人才等方面的支撑服务;
背景 11月10日,具有计算奥运会之称的 Sort Benchmark 全球排序竞赛公布了2016年最终成绩,腾讯云大数据联合团队用时不到99秒(98.8秒)就完成 100TB 的数据排序,打破了阿里云去年创造的329秒的记录。在更早前,百度创造的纪录是716秒,Hadoop 的记录是4222秒。 在这次竞赛中,腾讯云数智分布式计算平台,夺得 Sort Benchmark 大赛 GraySort 和 MinuteSort 的冠军,这也体现了腾讯云数智分布式计算平台在数据处理上的优越性能。在竞赛结果公布之后,
7月20日下午,海口市举办市委中心组(扩大)学习会暨大数据分析与应用落地专题讲座,腾讯研究院“互联网+”指数团队、政府事务部、SNG社交网络运营部与互联网+合作事业部应邀出席。 ◢ 海口市副处级以
昨日,IBM与腾讯达成深度战略合作,成为腾讯体育社交媒体数据分析合作伙伴。双方将针对包括2014巴西世界杯在内的一系列体育赛事报道开展深入的合 作,通过IBM大数据分析、云计算等领先技术能力提供社交和移动等数据分析支持,为用户打造全新的体育观赛体验。双方此次合作是大数据在实际应用层面上的 一次重要落地,同时也是腾讯作为网络媒体在世界杯报道模式上的有效创新。 此次合作中,IBM将根据网友和球迷在腾讯网络媒体平台及社交网络上发布的海量公开信息及数据,进行精准的大数据分析,获得关于球迷话题、球迷类型、球迷个
2015年12月10-12日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所、北京中科天玑科技有限公司与CSDN共同协办,以“数据安全、深度分析、行业应用”为主题的 2015中国大数据技术大会 (Big Data Technology Conference 2015,BDTC 2015)在北京新云南皇冠假日酒店盛大开幕。 在12日下午的大数据安全分论坛上,来自阿里巴巴数据安全部阿里数据安全小组总监郑斌、腾讯安全云部助理总经理李旭阳、奇虎360高级技术经理张卓、明略数据技
韩光祖,腾讯云 TVP,现任上海腾展长融董事 & CTO。美国南加州大学企管硕士,曾任富邦华一銀行总部渠道与数字银行部副总裁及总部信息科技部副总裁、纬创集团 WistronITS 全球总部首席信息官 、企业资安主委、子辰国际开发(央企港银博源基金)技术顾问兼任 COO (投资)、新蛋网全球科技及委外服务总监、外资银行科技一级部主管 12 年。有 20 余年企业 IT/MIS/IS 营运经验,有 DD、私募债权融资、工业地产交易与股权转让、跨境金融财务、科技发展与创新经验。并且也拥有多年大型电商行业从业及银行核心系统更换经验, 熟悉信息化、数实化、商业系统分析、云架构及云迁移、电信公有云建置及开发、整合; 并熟悉研发、产品、售前、交付、售后等业务;甚至包括专业的服务解决方案、规划、实施、建立大型资料分析、资料采集及深度学习图像物件侦测的AI工艺辅助决策和熟悉企业整体战略规划与实施。
腾讯云Elasticsearch在腾讯云客户及腾讯各个内部业务中,广泛应用于日志实时分析、结构化数据分析、全文检索等场景。腾讯云联合Elastic推出了涵盖了全部商业化功能的内核增强版。在内外部客户海量数据规模,众多的应用场景下,对原生ES进行了高扩展性,高可用,性能,成本等全方位的优化。本次分享主要剖析腾讯对 Elasticsearch 海量规模下的优化与实践,希望能和广大 ES 爱好者共同探讨推动 ES 技术的发展。
日前,2022年度“数治湾区-粤港澳大湾区数字治理创新案例遴选活动”结果公布,其中腾讯数字政务提报的“腾讯云产业大数据分析和决策平台”荣获数字经济领域创新案例。本次活动由中山大学数字治理研究中心、广州市社会科学院城市文化所等多方机构联合主办,中国发展研究基金会、中国信息通信研究院、综合开发研究所(中国·深圳)、广州市博士科技创新研究会等机构专家学者提供学术支持。
近日,大批依托企业、科研机构、科研院所或高校而设立的国家工程实验室纷纷落地,旨在加快中国产业发展和技术进步。本文深入浅出地分析了大数据类国家工程实验室的特点,及其背后强有力的推手。 背景: 为贯彻落实国家“十一五”中产业基础设施相关纲要和规划,作为国家科技创新体系的重要组成部分,加强和规范国家工程实验室建设与运行管理,国家制定了《国家工程实验室管理办法(试行)》。 该管理办法列出二十六项明确规定,来规范实验室的组织管理、申报与审理、监督管理等工作,为了真正做到“建有所用”国家也是操碎了心。 目前国家工程实验
<数据猿导读> 国内市场已满足不了阿里的胃口,菜鸟网络要建全球智能配送平台;接连收购了两家数据公司,FlightGlobal要做航空领域的数据分析巨头;2亿元融资之后,腾讯云宣布正式“牵手”永洪科技,
如今大数据分析市场与几年前相比已经截然不同,在日前发布的2017年度市场研究报告中,2017年的全球大数据分析市场规模比前一年增长了24.5%,这主要是由于公共云的部署和利用好于预期,以及云计算的平台、工具和其他解决方案都在加速融合。此外企业正在通过大数据分析更快速地脱离实验和验证阶段,并从部署中获得更高的业务价值。展望未来,通过在物联网(IoT)、移动性和其他边缘计算用例中采用大数据分析技术,大部分市场可以保持未来几年的增长。
文 | 马海刚 来源:HRTechChina HR管理经过几十年的发展,理论基础仍是工业时代的科学管理经验。近年来面对汹涌而来的移动互联网大潮以及层出不穷各种新的管理挑战,HR管理的理论和方法并没有出现相得益彰的创新内容。唯一引起了广泛关注的HR管理遇上大数据的话题,目前公开的研究也多聚焦在概念阶段,能够真正应用到企业HR管理实践的案例却不多见。本文旨在结合腾讯在HR大数据领域的探索历程,来说说大数据将如何助力HR管理升级,迎接这个崭新的时代浪潮! I时代,传统的HR将被颠覆,你造吗? 2012年12月1
在残酷的商业竞争中,企业面临众多发展方向的诱惑,却不忘初心,始终坚持一条路已属不易。而对于本就不好做的第三方服务公司来说,专注行业分析16年更是显得尤为可贵。易观就是这样一家公司 来源:数据猿 记者:
<数据猿导读> 河南成立云计算大数据产业联盟;语言通信服务公司亚美亚与腾讯云达成战略合作;大数据分析公司易观获9000万人民币B轮融资……以下为您奉上更多大数据热点事件 来源:数据猿 作者:abby
对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。COS 提供网页端管理界面、多种主流开发语言的 SDK、API 以及命令行和图形化工具,并且兼容 S3 的 API 接口,方便用户直接使用社区工具和插件。
安全日志记录着企业服务器、云基础设施、应用程序等的全部执行过程,对日志数据进行追溯分析,可以准确清晰地了解企业 IT 设施状况、排查安全隐患、检索故障源头等。
5月24日,以“无界数据、无限智能”为主题的2018腾讯“云+未来”峰会AI大数据分论坛在广州拉开帷幕。
目前,大数据分析是一个非常热门的行业,一夜间,似乎企业的数据已经价值连城。企业都在开始尝试利用大数据来增强自己的企业业务竞争力,但是对于大数据分析行业来说,仍然处于快速发展的初期,这是一个快速发展的领域,每时每刻的都在产生新的变化。我们来看下大数据行业的未来的五个趋势。 1.基于云的大数据分析 Hadoop是用于处理大型数据集的一个框架和一组工具,这个最初被设计工作在物理机的集群上,但是目前这种现象已经改变,越来越多的基于云中的数据处理器技术出现,例如亚马逊利用云的数据BI的托管长款,谷歌B
大家应该都对 QCon 全球软件开发大会很熟悉了吧?今年是 QCon 进入中国的第 13 个年头,在过去 13 年里,阿里巴巴首席技术官程立(鲁肃),美团首席科学家夏华夏,OceanBase CTO 杨传辉,腾讯玄武实验室总监于旸(TK),英特尔高级首席工程师、大数据分析和人工智能创新院院长戴金权等众多国内外知名技术大咖在这里将自己的宝贵经验奉献给了我们。 已经过去了 12 年,今年的 QCon,还能让你有新鲜感吗?这是你想知道的问题,也是我们一直关心的问题。除了交流技术、认识同行,我们希望,对你来说,
<数据猿导读> 知乎数据库出现严重事故,用户数据泄漏恐怕在劫难逃;甲骨文宣布收购云计算仓储及库存管理平台 LogFire,用于提升供应链管理能力;美国初创公司Saildrone完成1400万美元融资,
随着全球经济数字化转型的加快,企业对大数据的需求也日益强烈,复杂场景、规模成本和数据安全等问题都对大数据业务发展提出了新挑战。
搜索一下“HR+大数据”,可以轻松得到几百万条记录,可见大数据在HR领域并不是一个陌生的话题,遗憾的是,热度有余而深度不足。北大光华的穆胜博士在其写的《大数据为何走不进人力资源管理?》一文中提出“HR
随着全球经济数字化转型的加快,企业对大数据的需求也日益强烈,复杂场景、规模成本和数据安全等问题都对大数据业务发展提出了新挑战。 11月4日,在腾讯数字生态大会大数据专场,腾讯云副总裁黄世飞提出:腾讯云大数据要开源开放,共建云端大数据生态。未来腾讯云将扮演“数据连接器”,助力社会企业、组织充分释放大数据能力,快速推进云上数字化创新实践。 (腾讯云副总裁黄世飞) 大数据技术与多场景业务融合,正在不断改变大众生活。然而目前大数据应用方面仍旧存在区域分布不均,应用程度不深等问题。要实现全面数字化升级,大数据方
摘要 日前,腾讯云大数据数据湖计算 DLC 与国内两家知名云厂商的数据湖产品进行了性能对比,其中腾讯云 DLC 在三款产品中SQL平均执行查询时间短,性能表现优。腾讯云大数据 DLC 在存算分离和大数据量查询场景下,海量查询性能较 A 厂商 产品提升 248%,较 B 厂商产品提升36%。 在存算分离大数据量查询场景下,腾讯云大数据 DLC 较 A 厂商 、B 厂商表现更优,同时在较大任务上的任务执行成功率更高,所有任务均成功执行。结合性能、性价比、使用体验等因素,腾讯云 DLC 在云原生数据湖选择上整体上
<数据猿导读> 在本周,除了一如既往在大数据领域十分活跃的BAT三大佬继续东征西讨之外,联通公司也有大动作,不但宣告大数据三年计划,还于上海发布了最新的大数据产品,由此观之,联通如今在大数据领域的发展
如果大数据是一块蛋糕,那么大数据分析工具就是切蛋糕的刀叉。人们都期待着能用“刀叉”从大数据中挖出自己想要的“价值”,因此大数据分析工具被人们寄予厚望。而云计算技术的兴起似乎又给大数据注入了新的推进剂,那么大数据和云计算的结合又会发生怎样的化学反应?对大数据分析工具的发展又有怎样的影响?
本文介绍了腾讯云网络产品的智能化演进,主要从四个方面进行介绍:自研路由器引入AI,打造智能网络;基于意图的网络;基于策略的网络;AI在网络运维领域的应用;以及网络大脑的构建。
<数据猿导读> 上周,最让人为之称道的便是出行行业两巨头宣布合并的消息,公告一出,一时激起一片哗然,随后反垄断的声音此起彼伏,总之滴滴每次一出手,总能如此兴师动众夺人眼球。下面就共同回顾一下上周热点事
10月22日晚19:00,腾讯云大数据“数智话”技术沙龙 第三期《流计算 Oceanus 基于Flink的实时大数据分析平台》直播圆满落幕。流计算 Oceanus 产品负责人,流计算 Oceanus 专家工程师 围绕腾讯云大数据的流计算产品——流计算Oceanus展开,重点介绍了其优势特性、技术演进和在实际场景中的应用实践。 让我们一起来回顾下当晚的直播内容吧! 关注腾讯云大数据公众号 邀您探索数据的无限可能 点击“阅读原文”,了解相关产品最新动态 ↓↓↓
本文介绍了电力大数据分析在电力行业的应用,包括电网监测、运营效率提升、客户体验改善、减少损失和降低成本等方面。电力企业正在利用大数据技术进行数字化转型,以更好地满足客户需求、提高运营效率和降低运营成本。永洪科技的一站式大数据分析平台为电力行业提供了强大的数据分析和挖掘能力,帮助电力企业实现数据驱动的决策和创新。
导读 / Introduction 4月18日,在 “腾讯大数据高峰论坛”上,腾讯正式发布自研第四代数智融合计算平台“腾讯大数据-天工”,该平台以最新的“数据协同、技术互通、平台大脑”技术理念为基础,在确保数据安全这一重要前提下,真正实现万亿级数据分析无人“自动驾驶”,进而推动大数据和人工智能技术融合为一,引领全球大数据计算进入下一时代。 中国科学院院士梅宏、中国信息通信研究院云计算与大数据研究所副所长魏凯、埃森哲战略与咨询董事总经理袁虹、腾讯数据平台部总经理蒋杰、英特尔大数据首席工程师程从超、腾讯数
贵安新区与上海贝格合作,共建“大数据小镇” 日前,贵州贵安新区与上海贝格数据公司宣布达成战略合作,据悉,上海贝格是一家基于金融大数据的服务供应商,旗下产品包括金融大数据平台、投研管理平台以及大数据金融
腾讯云文件存储CFS在中国香港地区上线,提供企业出海高速直通车服务。这是国内首家在中国香港地区提供该服务的云厂商。CFS主要为云主机服务的可多客户端共享、弹性拓展的高性能NAS存储服务。随着中国社交软件、视频点播产品、游戏等业务在国外的扩张,如何保障海外用户体验的诉求越来越强烈。腾讯云文件存储CFS作为最便捷易用的静态文件存储产品,此次中国香港节点的推出,既免去用户用云主机自建NAS的繁琐及高成本,也为用户出海提供更高效便捷的共享存储方案。
导语:6月23日,腾讯游戏数据分析系统负责人周东祥在 "GIAC全球互联网架构大会" 的分享了主题为《大数据分析系统在游戏领域的迭代与实践》的内容,具体的分享视频和PPT可以在大会官网下载和观看。这里主要以陈述的角度把个人的分享的主要观点和概要内容分享给大家,欢迎大家来交流,指正。 给大家说下,我今天分享主要内容,分为三个主要内容: 1. 分析系统在游戏分析的背景和要解决的问题 2. 大数据分析引擎 在游戏领域的迭代与实践 3. 分享的总结和未来规划 以数据分析角度来讲,这个是当时大数据技术最
文:傅志华 大数据的产业链从整体上可以分为四大层,包括IT基础层、数据基础层、数据应用层和数据安全层。个人认为在中国市场对于创业者来说,数据应用层的创业机会最多,想象空间也最大。 本文将重点介绍数据应
领取专属 10元无门槛券
手把手带您无忧上云