腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何在flink中指定任务管理器/任务
槽
的核数
给出以下yarn-session命令: yarn-session.sh -d -n 12 -tm 4096 -qu QueueX -s 4 -jm 2048 我们将任务管理器的
内存
指定为4096,并将每个任务管理器的
槽
数指定为4,并且将任务管理器的
内存
的1/4分配给每个任务
槽
。我们可以为每个任务管理器指定核心的
数量
吗?(默认情况下,每个纱线容器只有一个核心)。此外,我们是否可以指定每个任务
槽
的核心
数量
? 如果我们不指定内核的
数量
,那么每个任务
浏览 213
提问于2020-08-24
得票数 0
回答已采纳
2
回答
Apache :限制TaskManager中CPU的
数量
、
、
Flink中,您只需要设置要使用的最大
内存
和任务
槽
的
数量
(这只是将
内存
分开),就像所说的 taskmanager.numberOfTaskSlots:单个TaskManager可以运行的并行操作符或用户函数实例的
数量
这样,TaskManager可以利用多个CPU核,但同时,可用
内存
在不同的操作符或函数实例之间进行分配。这个值通常与TaskManager机器所拥有的物理CPU核的
数量
成正比(例如,等于内核的
数量
,或内核
数量
的
浏览 2
提问于2017-06-23
得票数 3
1
回答
相同任务管理器
内存
中的flink
槽
是共享的吗?
这些信息是用flink.apache.org描述的,我不确定
内存
是否有3个插槽共享?与来自其他作业的子任务竞争托管
内存
,但是有一个这里是;当前
槽
只分隔任务的托管
内存
()。有的工作大,有的小,
槽
配置太难。如果共享
内存
,则只设置总进程
内存
即可。
浏览 1
提问于2022-03-25
得票数 0
6
回答
MySQL最大
内存
使用率
、
、
我想知道如何对
Linux
服务器上的MySQL使用的
内存
量设置上限。 现在,每次请求新的
查询
时,MySQL都会不断占用
内存
,最终会耗尽
内存
。有没有办法限制MySQL使用的
数量
不超过这个
数量
?
浏览 7
提问于2009-07-24
得票数 117
4
回答
我如何知道Bigquery
查询
使用的插槽
数量
?
我正在尝试计算每个大型
查询
查询
使用的
槽
的
数量
。有没有办法找出答案?
浏览 0
提问于2016-11-23
得票数 7
1
回答
最好是锁定一个共享资源,或者有一个线程来满足请求?
、
、
、
、
我有一个共享
内存
池,许多不同的线程可以从中请求分配。在每个线程中,请求分配的情况会很多,但是线程的
数量
可能很少,通常只有一个线程在运行。我不确定下面哪种方法处理这个问题更好。2)让每个线程注册一个请求
槽
,当它需要分配时,它将请求放入
槽
中,然后阻塞(while (result == NULL) { usleep() })等待请求
槽
有结果。单个线程不断地迭代请求
槽
,进行分配并将它们分配给请求
槽
中的结果。 第一个是简单的解决方案,但是如果时机合适,单个线程可能会占用锁。第二个
浏览 0
提问于2011-08-08
得票数 0
回答已采纳
1
回答
预分配unordered_map<string,vector<uint8_t>>的最有效的方法是什么?
、
、
我可以知道对的
数量
,所有vectors<uint8_t>的大小都是相同的,而且随时都是已知的。我想知道在插入元素之前,是否可以通过分配所有所需的
内存
来提高性能。据我所知,我可以用.reserve()预先分配字符串“key/
槽
”的
数量
。但是是否有一种方法从一开始就分配unordered_map所需的所有
内存
?
浏览 6
提问于2022-10-24
得票数 0
1
回答
当有大量空闲堆
槽
时,ruby请求更多
内存
、
、
、
、
我们有一台服务器在运行
浏览 2
提问于2017-06-03
得票数 3
回答已采纳
1
回答
"Petabyte scale“Redshift使用超过500MB的
内存
对848.00 KB的数据进行排序
我注意到在执行计划的一个步骤中有相当大的
内存
分配,这是非常令人困惑的。 有没有什么想法,为什么会发生这样的事情?
查询
是直接的select *,row_number() over(partition by column1) from table where sort_key=value。
浏览 8
提问于2016-08-29
得票数 0
1
回答
星火如何利用每台机器中的多核并行性?
、
当然,通过数据并行来开发多线程需要更大的
内存
,但我不知道我的Spark程序中的哪个功能是由多线程并行化的。所以我不知道哪个部门负责OOM。我控制RDD分区的
数量
(并行度),通过考虑机器的总数和每个工作者的
内存
量(每台机器),以便数据的每个RDD分区都能容纳在
内存
中。我应该特别注意哪些函数不要在
内存
中使用太多
内存
? 谢谢
浏览 2
提问于2017-01-23
得票数 0
回答已采纳
1
回答
对于docker ext-install,-j选项是做什么的?
我怀疑nproc与进程的
数量
有关吗?
浏览 2
提问于2017-10-26
得票数 18
回答已采纳
2
回答
Redshift WLM配置:如何使用未分配的
内存
?
、
定义红移
查询
队列时,可以将分配给每个队列的
内存
比例分配给每个队列。因此,例如,如果您有5个队列,您可以为每个队列分配20%的
内存
。但是,您也允许分配
内存
,以便它的一部分仍未分配。在这个文档:中,它说,“任何未分配的
内存
都由Amazon管理,如果队列请求额外的
内存
进行处理,就可以临时分配给队列。在文档的前面,它说,“如果特定的
查询
需要比分配给单个
查询
槽
的
内存
更多的
内存
,可以通过增加wlm_query_
浏览 0
提问于2016-03-25
得票数 6
回答已采纳
2
回答
不能在Azure数据库上使用jdbc驱动程序将大型DataFrame写入MSSQL服务器
、
、
、
、
Databricks(笔记本)运行在一个具有56 GB
内存
、16个核心和12个工作人员的集群节点上。
浏览 10
提问于2022-02-11
得票数 0
1
回答
使用azure应用程序服务部署插槽运行不同的应用程序?
、
、
azure应用程序服务上的部署插槽实际上是为了运行相同应用程序的新版本,以实现蓝/绿部署策略。我的问题是,运行一个包含多个组件(前端/后端)的应用程序以将它们放入不同的部署中是违反规则的。在标准计划中,我可以将最多5个服务加载到单个azure应用程序服务计划中。在非生产环境中,这将是很好的成本节约措施,因为每个服务的单个实例都很好。我的问题是a)这违反规则了吗?b)此策略是否存在陷阱?
浏览 2
提问于2018-09-13
得票数 1
1
回答
IBM x3650 m3服务器机器。随机存取存储器
这台机器使用16个
槽
的Ram。有4个
内存
的ram安装。每一个都有4GB。所以整个机器有16 GB的
内存
。它们被放置在不同的位置上。所以问题是。为什么重要?2x是同一家公司,被放置在第3和6
槽
,而其他2是相同的,放在12和15。就这样。在升级这台机器时,我应该注意什么?在哪里放置其他
内存
?
浏览 0
提问于2020-04-13
得票数 1
回答已采纳
1
回答
气流:如何指定资源库的
数量
使用?
、
、
、
、
调度程序不仅应该调度少于最大线程数的线程,还应该将所有并发任务的RAM总量保持在可用
内存
以下。问题:特别是对于气流,我如何指定任务实例的
数量
资源使用?
浏览 0
提问于2018-09-02
得票数 9
回答已采纳
1
回答
纱线最佳减径倍数的确定
、
、
、
在MRv1中,我们有以下两个可配置参数来设置每个节点的映射和缩减插槽的
数量
。mapred.tasktracker.map.tasks.maximum此外,建议Map插槽的
数量
略高于Reduce插槽的
数量
Map Reduce作业的reducers理想
数量
应等于或大于群集中可用reduce插槽的
数量
。 如果我上面的理解不正确,请更正wrt MRv1...在MRv2中,我们不再有
槽
的概念,取而代之的是容器为Map
浏览 1
提问于2015-06-23
得票数 0
1
回答
Amazon
查询
槽
、并发性和队列之间的区别?
、
、
、
我们在文件中发现: 需要考虑的主要有三点:
查询
槽
、并发性和队列。我们了解到这一点: 并发性是队列可以并行运行的
查询
量。默认为
浏览 2
提问于2015-01-23
得票数 1
2
回答
为什么我的系统显示的
内存
(RAM)比实际安装的少?
昨天我买了一台4GB
内存
的新笔记本电脑。当我安装Ubuntu11.10 (beta)时,它显示的是1.5GiB (2GB-512 2GB图形),而忽略了2GB。uname -a:dmidecode:SMBIOS 2.7 present.
浏览 0
提问于2011-09-13
得票数 2
1
回答
对于一个BigQuery工作来说,总量管理系统意味着什么?
这些文档有点简洁(“只输出
槽
--工作的毫秒”)。
浏览 1
提问于2018-01-17
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Linux DNS 查询剖析 Linux 中国
图解|Linux内存碎片整理
Linux内存映射mmap原理分析
JDBC大查询,内存溢出解决方案
Linux 查询应用进程号、端口、文件
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券