我用Helm创建了一个图表,其中包含一个部署,它在Python中启动一个包含多个不和谐机器人的Docker映像。现在,图像只包含一个机器人,但将来可能包含更多的机器人。当图表部署到我的GCP集群上时,吊舱试图放大:
Events:
Type Reason Age From Message
---- ------ ---- ---- -------
Warning FailedSch
我有两个具有以下配置的mapr集群,
cluster 1: hosted on aws, 3 nodes with 32g of memory/32 cores each
cluster 2: hosted on bare-metal servers, 8 nodes with 128g of memory/32 cores each
我正在两个集群上通过纱线运行下面的电火花代码
df=hc.sql("select * from hive_table")
df.registerTempTable("df")
df.cache().count()
for: 100
这里粘贴了一个小示例:
我希望能够启动一个主Dispatcher机器作为集群的种子节点。调度器具有指向集群的工作者的集群感知路由器。然后,我希望能够根据需要启动worker机器,并让调度路由器自动知道它们的存在,以便它可以开始向它们发送工作。
问题是,如果我首先启动Dispatcher机器(因为它是种子节点),集群感知路由器就会启动,并且找不到它的任何路由对象(公平地说,它们还没有启动)。文档中提到:
The routee actors should be started as early as possible when starting the
actor system, because