我的集群配置如下:
3节点簇
每个集群节点的内存为128 RAM。
处理器:每个集群节点16核心HyperThreaded。所有三个节点都有Kudu主服务器和the和Impala服务器,其中一个节点具有Impala目录和Impala StateStore。
我的问题如下:
1)在运行并发查询时,我很难在Impala中找到动态资源池。我试过给mem_limit一点运气都没有。我也尝试过静态服务池,但也无法实现所需的并发性。即使使用准入控制,也没有实现所需的并发性。
I) The time taken for 1 query: 500-800ms.
II) But if
我想使用gnu并行来并行以下代码段
for a in `seq 5` ; do
for b in `seq $a` ; do
echo $a $b
done
done
这是否有可能通过以下方式实现
parallel echo {1} {2} ::: $(seq 5) ::: $(seq {1})
上述语法不起作用。
动机:
我想使用并行方式将多个作业提交到集群中,如下面所解释的那样: