腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
GNU
并行
中
的
链接
作业
linux
、
shell
、
parallel-processing
、
gnu
我正在尝试使用一个名为TOOL.sh
的
工具来执行此命令。我
的
并行
输入值是0.01、0.02和0.05。 仅此命令就应该为每个--maf输入生成四个输出文件。
浏览 16
提问于2020-09-22
得票数 1
回答已采纳
1
回答
作为
作业
队列
的
并行
gnu
parallel-processing
、
gnu-parallel
我有一组
作业
,所有的
作业
都可以
并行
运行,所以我想
并行
化它们,以获得更好
的
吞吐量。 这就是我目前正在做
的
事情:我使用同时在一组
作业
中
运行
作业
的
多处理库编写了一个python脚本。在一组
中
的
所有
作业
完成后,将调用另一组
作业
(脚本)。这是低效
的
,因为集合
中
的
每个
作业
都有不同
浏览 1
提问于2017-03-11
得票数 1
1
回答
在shell
中
运行一个进程池
linux
、
process
、
pool
我正在寻找一种简单
的
方法,可以使用一个命令同时运行N选定
的
进程。它应该将所有输出放在我
的
终端上,并在我使用ctrl+c退出时关闭所有输出。有任何现有的应用程序可以做到这一点吗?我在想一些像exec_many 10 foo这样
的
东西--它应该能让10 foos运转起来,并使任何死去的人重生。
浏览 0
提问于2010-04-21
得票数 5
回答已采纳
2
回答
为什么我
的
gnu
与ffmpeg
并行
只在远程主机上执行ffmpeg?
gnu-parallel
我想使用ffmpeg用两台电脑,我知道
并行
可以做到我用这个cli parallel --trc {.}.mkv -S virtual,: 'ffmpeg -y -i {} -vf yadif,crop=但线-S virtual,:不要求
并行
运行,甚至在本地pc?我
的
目的是使用
gnu
并行
分配在两个或两个以上
的
pc上使用
的
负载/cpu,例如在localpc上使用50%
的
负载,在远程上分配50%
的
负载?或者我需要一些更复
浏览 0
提问于2021-12-09
得票数 2
回答已采纳
1
回答
理解
GNU
并行
工作日志输出
中
的
时间戳
logs
、
timestamps
、
for
、
gnu-parallel
GNU
并行
是否尽可能多地启动一批
作业
(开始由
GNU
并行
内部或/和-j选项以及给定
的
参数管理
的
作业
数量),并且一旦完成,然后启动下一批
作业
等等?上下文 我想学习如何更好地处理与
作业
相关
的
时间戳(启动时间,结束时间,然后运行时间)和
GNU
并行
。作为这里
的
一个示例,我想了解是否可以使用通过自定义log函数记录
的
自定义日志<e
浏览 0
提问于2022-12-05
得票数 1
回答已采纳
3
回答
在多个文件夹
中
并行
运行脚本
bash
、
shell-script
、
files
、
parallelism
每个子目录中都有相同
的
for循环脚本。我想进入每个子目录,在几个终端
中
并行
运行for循环脚本。我试过了,但它似乎是连续
的
(一个接一个),但是我想
并行
地运行它们。
浏览 0
提问于2017-05-29
得票数 9
1
回答
在bash函数
中
杀死
gnu
并行
bash
、
kill
、
gnu-parallel
我在子subshell函数中使用
gnu
并行
,例如, parallel --will-cite sleep ::: 60在将SIGTERM发送到函数时,我希望
并行
也会被杀死。$ pgrep -P 13255 # child of func -> the subshell$ pgrep -P 13256 # child of the subshell ->
gnu
id,我就不能杀死
并行
程序。我试图在函数
中
设置一个陷阱
浏览 0
提问于2019-02-28
得票数 1
1
回答
“
并行
--
作业
10”是否意味着确切
的
10个
作业
将运行?
gnu-parallel
当将选项--jobs指定给
GNU
parallel时,这到底意味着什么?parallel --jobs 10 ./program ::: {1..100}那么,--jobs究竟指定了什么呢?
浏览 0
提问于2016-03-22
得票数 10
2
回答
并行
执行Shell循环,但只有N个工作人员
shell
、
parallel-computing
我们有超过100 git
的
回复,有时我想grep
的
全部。同时运行所有更新会产生太多
的
进程。有人能解决这个问题吗?
浏览 0
提问于2015-07-08
得票数 3
1
回答
GNU
并行
交互模式。如何为每个
作业
发出块请求而不是请求?
bash
、
parallel-processing
、
gnu
、
interactive
、
gnu-parallel
是否可以为每个
作业
发出块请求而不是请求?function $1 $2 $3 | parallel --
gnu
--group --interactive -k -j 4 function_run {} 在这种情况下,
GNU
并行
是问问题来运行每个
作业
,但我希望问题运行下一块
的
4个
并行
作业
。如果我能在运行过程
中
更改-j,那就太好了。
浏览 0
提问于2014-10-30
得票数 1
回答已采纳
2
回答
使用shell脚本
并行
运行具有不同输入
的
同一文件
的
多个副本
linux
、
shell-script
、
shell
、
gnu-parallel
循环所有文件
的
一种方法是编写一个shell脚本,在其中我使用sed将"Analysis.C“
中
的
输入文件名从0001改为1000。但是,我必须一次完成一个输入文件。我想要
的
是
并行
运行文件"Analysis.C“
的
多个实例,在每个实例
中
接受不同
的
输入(我猜想,这里
的
约束是我可以在PC上节省
的
核数),并同时执行不同
的
实例。我该怎么做?
浏览 0
提问于2018-08-31
得票数 2
回答已采纳
2
回答
使用Unix命令行执行大容量IP地址查找
的
命令在unix shell上工作,但在linux shell
中
不起作用。
linux
、
shell-script
、
shell
、
xargs
cat ips.txt | xargs -I% curl -s http://ipinfo.io/%/geo > temp.txt103.240.8.0 这在Mac
的
终端上运行得非常好:"ip": "103.240.8.0","region": "Maharash
浏览 0
提问于2017-04-20
得票数 -1
2
回答
如何与inotifywait
并行
使用?
shell-script
、
gnu-parallel
、
inotify
我现在有这样
的
情况:因为某种原因,这根本没什么用。inotifywait
的
输出与find相同(即每行一个文件):工作正常
的
...and。
浏览 0
提问于2021-02-21
得票数 2
1
回答
在
GNU
并行
中
向
并行
运行进程添加更多核心
parallel-processing
、
gnu-parallel
我使用
GNU
并行
来
并行
运行几个
作业
。你有什么建议吗?
浏览 2
提问于2017-04-27
得票数 6
回答已采纳
2
回答
每批
并行
处理命令
bash
、
shell-script
、
parallelism
我想
并行
处理数据,但我担心如果我一次处理20,就会产生一些问题。所以,我想处理10个数据2次。有什么命令可以这样做吗?数据采用文件格式。它是相当庞大
的
,每个文件可以达到10 It。所以我把这个过程限制在10,等于核
的
数目。至于我
的
RAM,我相信处理文件
的
软件不会同时加载所有的东西,所以RAM
的
使用率很低。这就是为什么我只需要对每10个数据进行
并行
处理。现在,我生成10个shell脚本,它们
并行
执行,每个shell脚本都包含顺序命令。
浏览 0
提问于2018-11-07
得票数 1
回答已采纳
1
回答
GNU
并行
:从
作业
日志
中
删除行,
并行
更新
gnu-parallel
如果您使用--joblog path/to/logfile运行
GNU
并行
,然后在
并行
运行时从上述日志文件
中
删除一行,则
GNU
并行
将不再能够向其追加未来完成
的
作业
。#!但是,如果您在10秒后执行cat log,您将看到在第三个条目之后,没有任何东西被写入到当前磁盘上
的
实际文件
中
。 这背后
的
原因是什么?是否有办法从文件
中
删除某些内容,并使
G
浏览 0
提问于2018-11-15
得票数 2
回答已采纳
1
回答
PBS:
GNU
并行
:分配
的
主机不同,多CPU
作业
,多个
作业
给一些主机
hpc
、
gnu-parallel
、
pbs
使用PBSpro,我可以请求资源来运行我
的
工作。我
的
并行
集群
作业
归结为多次运行同一个文件,每次使用不同
的
索引/
作业
ID。每个任务产生自己
的
子进程,每个任务总共使用4个CPU。这是一个令人尴尬
的
并行
工作,每个任务相互独立,因此很适合
GNU
并行
工具。问题在于,PBSpro
作业
管理器可以将多个
作业
分配给同一个节点,或者只有一个
作业
分配给一个节
浏览 2
提问于2018-05-11
得票数 3
回答已采纳
2
回答
GNU
能让
并行
作业
知道它在哪个
并行
作业
槽下运行吗?(即对于-j 50,范围为0..49
的
索引)
windows
、
parallel-processing
、
gnu-make
、
legacy
我试图使用
GNU
并行
运行一些旧代码(例如,一次运行50个或100个实例);但是由于遗留资源问题(叹息),每个
并行
实例必须在一个单独
的
目录
中
执行。因此,我想使用-j 50,但其中:我可以看到实现这一目标的可怕方法(我在Windows 10下运行),但没有好
的
方法。:-(
GNU
是否提供了一个给定
的</em
浏览 2
提问于2020-01-23
得票数 1
1
回答
HPC上bash脚本
中
的
GNU
并行
终止命令
parallel-processing
、
hpc
我正在运行
GNU
并行
来运行一个bash脚本,但是似乎
GNU
并行
会自动杀死我
的
程序,我不确定为什么。当我单独运行内部脚本时,它可以正常运行。parallel --progress --joblog ${home}/data/hsc-admmt/Projects/log_a.sh -j 5 :::: a.sh 下面是
GNU
parall
浏览 0
提问于2021-02-25
得票数 1
2
回答
GNU
并行
ssh
作业
:如果服务器死掉,不完整
的
作业
会发生什么?
gnu-parallel
假设我们希望使用
GNU
并行
将
作业
分派给一组服务器。如果其中一个服务器死了会发生什么(停电,热关机.)忙着执行任务?
GNU
并行
是将同一
作业
分派给另一台服务器,还是该
作业
将永远丢失?
浏览 0
提问于2016-11-21
得票数 5
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
GNU C中typeof两种常用的用法
Shell中的并行计算
机器学习算法中的并行处理
Python中的并行处理:实例编程指南
网页中的超链接类型
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券