腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
同时为大量记录创建工作
流
服务实例
、
、
每个记录都必须作为单独的记录在工作
流
中注册,该记录必须经过自己的工作
流
。 是否有其他解决方案来处理
批
记录/ids?否则,工作
流
服务必须调用1000次才能注册工作
流
实例中的每条
浏览 4
提问于2012-09-20
得票数 3
回答已采纳
1
回答
三位
一体
比盖特或平等有什么优势?它有什么不同?
、
、
、
、
除了正在用它编写的语言之外,三位
一体
与Geth或奇偶(如果有的话)有什么主要的区别。它有什么
好处
?缺点?
浏览 0
提问于2018-08-30
得票数 2
回答已采纳
4
回答
有哪些编程语言是用于机电
一体
化的?
、
有没有专为机电
一体
化编程而设计的语言?我知道LabView,这是一种数据
流
语言,但不确定它的主要平台。 除了c/c++之外,你能向我推荐一些语言吗?用于机电
一体
化(机器人、传感器编程等)主题的任何语言。
浏览 0
提问于2012-11-27
得票数 1
回答已采纳
1
回答
如何延迟处理AWS Kinesis消息?
、
我希望延迟一个小时处理来自AWS Kinesis
流
的消息。我已经将KCL使用者配置为每四分钟读取一
批
记录,检查每条记录的时间戳,如果其中任何一条记录的时间不到一小时,则停止处理该
批
记录,而不设置检查点。然而,在实践中,消费者只读取消息一次,这意味着当它们准备
好处
理时,它们将被忽略,并且永远不会再次读取。有没有办法将使用者配置为每次都从上一个检查点重新读取所有消息?
浏览 6
提问于2019-12-03
得票数 2
1
回答
从批处理顺序Mule ESB调用
流
、
、
我创建了一个批处理
流
。从一
批
流
,我调用另一
批
,从第二
批
,我调用简单的第三
流
。我需要第三次流动的选择应该是完整的,然后,只有2条记录应
浏览 1
提问于2017-04-05
得票数 1
1
回答
在spark streaming程序中建立线程池
、
为了避免延迟和加快进程,我在spark
流
中构建了线程池。
浏览 0
提问于2017-11-12
得票数 1
1
回答
Akka HTTP源流与常规请求处理
、
、
使用与处理请求的常规方法相比有什么
好处
?我的理解是在这两种情况下 我正在考虑切换到HTTP
流
,但不太清楚什么是值
浏览 5
提问于2018-03-19
得票数 1
1
回答
为什么Apache气流不是数据
流
解决方案?
、
、
、
我知道批处理依赖于数据的收集,
流
处理依赖于连续的数据。 请简单地解释一下,为什么Apache气流不是数据
流
解决方案,而是批量处理。
浏览 3
提问于2022-04-18
得票数 1
1
回答
tensorflow验证监视器
流
auc
、
在tensorflow验证监视器
流
auc中,它对流意味着什么?案例1:每次调用验证监视器时,都会重置auc状态,因为在每个验证步骤中,对10个
批
进行
流
处理。案例2: auc状态没有重置,因此
流
auc是从验证监视器的第一次调用中计算出来的。即,第一输出( 100步)从10
批
计算,第二验证输出( 200步骤)基于第
浏览 5
提问于2017-06-09
得票数 1
回答已采纳
0
回答
Spark RDD apend
在Spark中,我以RDD的形式加载了一个数据集,并且喜欢不频繁地向其追加
流
数据。我知道RDDs是不可变的,因为它简化了锁定,等等。其他处理静态和
流
数据的方法是
一体
的吗? 类似的问题以前也被问过:
浏览 7
提问于2016-12-24
得票数 0
9
回答
Ruby的自动代码质量工具?
、
、
FindBugs、Checkstyle和PMD构成了代码质量度量和自动错误检查的三位
一体
。 有没有什么方法可以检查Ruby代码的简单bug和/或风格冲突?如果我能把它改编成Rails之类的框架,以便遵循Rails的习惯用法,就会有额外的
好处
。
浏览 2
提问于2008-09-10
得票数 37
回答已采纳
1
回答
火花结构化
流
避免延迟和检查点: startingOffsets最新版本不工作吗?
、
、
、
(分钟)似乎火花结构化
流
并没有很好地使用startingOffsets属性的最新。我不想读旧消息,只有重要的当前的!
浏览 3
提问于2021-10-01
得票数 1
1
回答
将火花流连接到
流
集输入
、
、
我想知道是否有可能提供输入来激发来自StreamSets的
流
。我注意到在StreamSets连接器目的地中不支持火花
流
。 我将探讨是否有其他方法将它们连接到一个示例POC。
浏览 3
提问于2016-07-06
得票数 3
回答已采纳
1
回答
是否有一个变量来识别火花
流
中的每一
批
数据?
、
在火花
流
中,数据按
批
间隔进行处理。is first batch of data10s~15s is third batch of data是否有一个变量来识别火花
流
中的每一
批
数据如果有这样的变量:我可以获得batchID的值来识别哪一
批
数据,也可以通过batchID (如:window(……).filter(_.batchId == 1) )过滤数据或者有什么方法来区分每一
批
数据?
浏览 6
提问于2016-02-02
得票数 3
回答已采纳
1
回答
具有周期性更新静态数据集的结构化
流
、
、
流
和静态数据集的合并是结构化
流
的一个很好的特点。但是每一
批
数据集都会从数据源中刷新。由于这些源并不总是动态的,因此在指定的时间段(或
批
数)缓存静态数据集将是一种性能增益。在指定的批处理期间/
批
数之后,数据集将从源重新加载,否则将从缓存中检索。 在星火
流
中,我使用缓存的数据集来管理它,并在指定数量的批处理运行后取消它的持久化,但是由于某种原因,这不再适用于结构化
流
。
浏览 1
提问于2017-12-13
得票数 9
2
回答
星火
流
和星火结构化
流
使用相同的微
批
引擎吗?
、
、
星火
流
和星火结构化
流
是否使用相同的微
批
调度引擎?星火结构
流
比星火
流
有更低的延迟吗?
浏览 0
提问于2019-02-01
得票数 3
回答已采纳
1
回答
PyFlink性能与Scala的比较
、
、
、
冷(
批
)层将用Apache (PySpark)实现。但是对于热(
流
)层有不同的选择:火花
流
或Flink。提前谢谢你!
浏览 3
提问于2021-11-05
得票数 1
回答已采纳
1
回答
如何在其中一个作业失败时关闭/杀死火花
流
应用程序
、
我正在运行一个星火
流
应用程序。有几次,其中一个作业由于某些运行时异常而失败。streaming将作业标记为失败,并继续处理下一个
流
批
。如果其中一个作业失败,是否有一个参数可以设置为通知Spark关闭应用程序(而不是处理下一个
流
批
)?我在独立集群模式上使用Spark1.4.1。
浏览 0
提问于2016-06-10
得票数 0
3
回答
当使用Spark结构化
流
时,如何才能获得当前批处理的聚合结果,如Spark
流
?
、
、
星火结构
流
( SSS )和星火
流
(SS)的一个很大的区别是SSS可以利用状态。它可以存储以前
批
的聚合结果,并将当前结果与先前的结果一起应用。因此,它可以从输入流的一开始就得到真正的聚合结果。因此,我的问题是,在SSS中,是否仍然可以像SS一样,获得当前
批
产品的受害结果?当下一
批
"cat“出现时,我的预期输出是cat|1
浏览 0
提问于2018-01-23
得票数 3
回答已采纳
1
回答
火花
流
-我如何通知消费者一旦生产者完成?
、
、
、
一旦notify Consumer将所有数据发布到Kafka topic,Producer是否有可能我曾想过要使用Sliding window,但问题仍然是,我们不知道生产者是否完成了发布数据?目前,我们计划使用多个分区来基于Default Partitioner拆分数据。更新: 每隔十五分钟,生产者就会得到数据
浏览 0
提问于2016-11-12
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Flink on Hive构建流批一体数仓
Flink1.11+Hive批流一体数仓
基于Flink+Hive构建流批一体准实时数仓
数据编织Data Fabric:批流一体的数据智能融合平台
深度解读:Flink 1.11 SQL流批一体的增强与完善
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券