首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
首页标签实时计算

#实时计算

行业客户现场SparkStreaming实时计算使用案例问题总结

用户9421738

虽然当前实时计算领域所有厂商都推荐Flink框架,但是某些传统行业客户因为多年固化的业务场景仍然坚持使用SparkStreaming框架。本文主要记录Spark...

14710

谈谈我对实时计算的理解

阿超

在这个数据驱动的时代,实时计算和大数据处理成为了许多企业和开发者关注的焦点。这里就来简单介绍一下实时计算和Flink的相关概念,希望能帮助大家快速入门。

9210

2024年大数据方向的发展趋势

王知无-import_bigdata

最近事情较多,因为临近年底,在做总结和后续规划,在这一年中,数据开发方向仍然在快速发展,新概念和新技术层出不穷。

1K10

作业帮实时计算平台高可用实践

深度学习与Python

随着业务的高速发展和实时计算的迭代,业务对实时计算的需求越来越多,对实时任务的稳定性要求也越来越高。对实时计算平台而言,底层调度系统及计算引擎的稳定性、高可用性...

18510

大数据初识------Flink如何实现Exactly once计算不重不丢

小时的棒棒糖

Flink是使用Kafka链接计算任务,利用kafka的exactly once实现流计算的不重不丢,而Kafka 的 Exactly Once 语义是通过它的...

48100

基于Flume+Kafka+Hbase+Flink+FineBI的实时综合案例(四)实时计算需求及技术方案

Maynor

逆地理编码:https://lbsyun.baidu.com/index.php?title=webapi/guide/webservice-geocoding...

36510

大数据架构设计(四十五)

用户9919783

Lambda架构设计目的在于提供一个满足大数据系统关键特性的架构。整合离线计算和实时计算,融合不可变性、读写分离和复杂性隔离等原则。

34520

Tugraph Analytics图计算快速上手之紧密中心度算法

GeaFlow

紧密中心度(Closeness Centrality)计量了一个节点到其他所有节点的紧密性,即该节点到其他节点的距离的倒数;节点对应的值越高表示紧密性越好,能够...

42020

TuGraph Analytics 流图计算之行为路径归因

GeaFlow

TuGraph Analytics(内部项目名 GeaFlow)是蚂蚁集团开源的分布式实时图计算引擎,即流式图计算。通过 SQL + GQL 融合分析语言对表模...

37620

进击大数据系列(九)Hadoop 实时计算流计算引擎 Flink

民工哥

Apache Flink 是一个框架和分布式处理引擎,用于对无边界和有边界的数据流进行有状态的计算。Flink被设计为可以在所有常见集群环境中运行,并能以内存速...

1.5K20

开源XL-LightHouse与Flink、ClickHouse之类技术相比有什么优势

用户2468294

Flink是一款非常优秀的流式计算框架,而ClickHouse是一款非常优秀的OLAP类引擎,它们是各自所处领域的佼佼者,这一点是毋庸置疑的。Flink除了各种...

39030

Flink SQL UDF重复调用问题解决方案

皮皮熊

UDF重复调用的问题在某些情况下可能会对Flink SQL用户造成困扰,例如下面的SQL语句:

1.4K01

数据中心互联光网络之数据实时计算

MOSS-DZ

本⽂主要针对波分运营管理系统展开介绍,即波分事件中⼼主要⽬的与技术⼿段浅谈。⽽开放光系统运营关键核⼼就是事件(event),运营事件的⽬标是⼀个事件解决⽹络的⼀...

33720

数据中心互联光网络之数据实时计算

MOSS-DZ

本⽂主要针对波分运营管理系统展开介绍,即波分事件中⼼主要⽬的与技术⼿段浅谈。⽽开放光系统运营关键核⼼就是事件(event),运营事件的⽬标是⼀个事件解决⽹络的⼀...

40730

伴鱼实时计算平台 Palink 的设计与实现

深度学习与Python

在伴鱼发展早期,出现了一系列实时性相关的需求,比如算法工程师期望可以拿到用户的实时特征数据做实时推荐,产品经理希望数据方可以提供实时指标看板做实时运营分析。这个...

60410

数据实时化技术创新进展 | 一文览尽 Flink Forward Asia 2022 重磅干货内容

深度学习与Python

2022 年 11 月 26-27 日,Flink Forward Asia(FFA)峰会成功举行。Flink Forward Asia 是由 Apache 软...

68020

Flink 在中泰证券的实践与应用

从大数据到人工智能

随着业务的不断发展,对数据的时效性要求也越来越高,传统的离线计算越发步履艰难,业务驱动着我们建立一套实时计算平台和体系。在实时计算平台的探索过程中,性能、场景的...

77410

聚合支付实现商场、会员、商户三方共赢

博阳SCRM系统

随着移动支付的兴起,绝大多数商场已经从原来的统一收银改为商户自主收银。但是,商场转为商户自主收银后,商场面临不知道商户实际经营情况,在租金谈判和续租谈判中,商场...

97110

大数据Flink进阶(二):数据架构的演变

Lansonli

Lambda架构在一定程度上解决了不同计算场景问题,但是带来的问题是框架太多导致平台复杂度过高、运维成本高,例如,在这个时期要完成离线计算需要使用Hive、Ma...

85460
领券