使用GNU Parallel和Ghostscript并行化PDF连接？
使用GNU Parallel和Ghostscript并行化PDF连接是一种将多个PDF文件合并为单个文件的方法。GNU Parallel是一个命令行工具，可以并行执行多个命令，而Ghostscript是一个用于处理PDF文件的开源软件。
在使用GNU Parallel和Ghostscript并行化PDF连接时，可以按照以下步骤进行操作：
- 安装GNU Parallel和Ghostscript：根据操作系统的不同，可以通过包管理器或者官方网站下载并安装GNU Parallel和Ghostscript。
- 准备要合并的PDF文件：将需要合并的PDF文件放置在同一个文件夹中，确保文件名的顺序符合合并的要求。
- 编写并行化脚本：使用任意文本编辑器创建一个脚本文件，例如
merge_pdf.sh，并将以下内容复制到文件中：
#!/bin/bash
merge_pdf() {
gs -q -dNOPAUSE -dBATCH -sDEVICE=pdfwrite -sOutputFile=output.pdf "$@"
}
export -f merge_pdf
find /path/to/pdf/files -name "*.pdf" | parallel merge_pdf在上述脚本中，/path/to/pdf/files应替换为存放PDF文件的实际路径。
- 保存并退出脚本文件。
- 给脚本文件添加执行权限：在终端中执行以下命令，为脚本文件添加执行权限。
chmod +x merge_pdf.sh- 执行并行化脚本：在终端中执行以下命令，运行并行化脚本。
./merge_pdf.sh脚本将使用GNU Parallel并行地调用Ghostscript来合并PDF文件。合并后的PDF文件将保存为output.pdf。
这种方法的优势是可以利用多核处理器的并行能力，加快PDF文件的合并速度。同时，由于并行化处理，可以更高效地处理大量的PDF文件。
应用场景包括但不限于：
- 批量合并多个PDF报告或文档为单个文件，方便归档和分享。
- 在大数据处理中，将生成的PDF结果文件合并为一个文件，便于后续处理和分析。
腾讯云相关产品中，可以使用云服务器（CVM）提供的计算资源来执行并行化脚本。此外，腾讯云还提供了对象存储（COS）用于存储和管理PDF文件。您可以通过以下链接了解更多关于腾讯云相关产品的信息：
请注意，以上提供的链接仅供参考，具体产品选择应根据实际需求进行评估。
相关·内容
1回答
我想做这样的事
find ./ -type f | parallel --gnu convert "{}" "$(basename "{}" pdf)jpg"
但是它不起作用(文件被重命名为filename.pdfjpg)。我认为问题在于子进程是立即执行的(甚至在调用parallel之前)。我希望对每个文件执行子进程。
多亏了，我才能做到：
find *.pdf -exec sh -c 'convert "$1" "$(basename "$1" pdf)png"' _ {} \;
浏览 0提问于2013-08-15得票数 3
回答已采纳
我想在Mac上使用开源命令行工具对OCR进行批处理，大约5800 PDF (每个PDF包含上一个问题的2到6页之间)。这次冒险的主要建议是，我想从所有这些PDF的文本中检索尽可能可靠的名字(最重要的是姓氏)。就是一个如何看待问题的例子。
在这一点上，我不知道具体如何进行。你怎么做？
我想首先将所有多页PDF转换为单个页面映像，作为png、jpg或tif，并使用以下命令将与一个PDF相关的所有图像移动到相应的文件夹中：
time for i in *.pdf; do mkdir "${i%.pdf}"; convert -colorspace GRAY -resize 3000x
浏览 2提问于2017-06-29得票数 1
回答已采纳
1回答
档案：
$ ls a.md b.md c.md d.md e.md
命令：pandoc file.md -f markdown file.pdf
如何并行地同时处理两个pandoc实例？可能与xargs或parallel有关。
它的作用就像
迭代/ cmd 1/ cmd 2
1/ pandoc a.md -f markdown a.pdf / pandoc b.md -f markdown b.pdf
2/ pandoc c.md -f markdown c.pdf / pandoc d.md -f markdown d.pdf
3/ pandoc e.md -f markdown e.pdf
浏览 0提问于2018-10-28得票数 3
回答已采纳
我有一个目录，其文件如下所示：
id1_1.txt
id1_2.txt
id2_1.txt
id2_2.txt
我需要将这些文件作为一对(例如id1_1.txt和id1_2.txt)传递给my_script。
以下是我认为有用的东西
parallel -j +0 -X python my_script.py -1 {} -2 {= s/_1/_2/ =} -o /output/dir/good /output/dir/bad ::: /my/dir/*_1.txt
其中-1将是以_1.txt结尾的文件，而-2将是其终止_2.txt的合作伙伴。
my_script识别选项-1的输入，但不识别选项
浏览 0提问于2018-07-22得票数 1
回答已采纳
2回答
gnu并行与多处理
、、、
multiprocessing模块和GNU并行有什么区别？另外，如果使用不同，哪种情况下是最理想的。
我试图对tesseract进行并行化，并发现有人建议在tesseract问题上使用GNU并行 。
我想了解，在使用一个用例之前，哪一个是理想的用例。
而且，我无法从gnu并行中获得所需的结果，我可以看到4个进程在top中运行，但它们比python花费的时间要长得多。
1)用于gnu-并行：
如所见，所需时间为8分40分
我使用以下命令：
ls image*.jpg | time parallel tesseract {} stdout -l hin
顶部输出是
2)使用多页特性的普通Tesse
浏览 4提问于2019-09-18得票数 2
1回答
我试图在Windows上并行构建一个可执行文件的GNU。当我使用下面的代码构建它时：
wget https://git.savannah.gnu.org/cgit/parallel.git/plain/10seconds_install
bash 10seconds_install
我没有得到任何可执行文件。进一步的细节，您可以看到以下：
C:\Users\nexleuser\Desktop\tmp>bash 10seconds_install
GnuPG (gpg) is not installed so the signature cannot be checked.
This m
浏览 0提问于2019-10-02得票数 1
回答已采纳
Python 3.7.5
OS: Windows 2016
Ghostscript版本: 9.5
我试图使用Ghostscript对目录中的多个PDF进行文本提取。该目录目前包含2个PDF: 1234.pdf和5678.pdf。
import os
import sys
def pdf2txt(directory,file):
import locale
import ghostscript
args=[file,"-dBATCH","-dNOPAUSE","-dNOPROMPT","-sDEVICE=txtwr
浏览 7提问于2019-12-12得票数 1
我正在运行GNU并行来运行一个bash脚本，但是似乎GNU并行会自动杀死我的程序，我不确定为什么。当我单独运行内部脚本时，它可以正常运行。
我想知道为什么会发生这种情况，以及如何解决它？
非常感谢您的帮助！
下面是我的代码：
parallel --progress --joblog ${home}/data/hsc-admmt/Projects/log_a.sh -j 5 :::: a.sh
下面是GNU parallel输出末尾的消息
/scratch/eu82/bt0689/data/hsc-admmt/Projects/sim_causal_mantel_generate.sh: lin
浏览 0提问于2021-02-25得票数 1
我必须承认，我正在阅读gnu并行文档，但我找不到我要找的东西。我需要运行一段有多个选项的代码。该代码是数学密集型的，在单核运行的3 3Ghz计算机上需要5天。我以前在-fopemp中使用过gfortran，但现在我正在运行这段C代码，所以gnu并行似乎就足够了。现在问题来了，我需要使用nice和nohup使用以下选项执行wcmap.c：
nohup nice -n 19 ./wcmap --slon_min 74.5 --slon_max 74.5 --ll_0_min 325 --ll_0_max 340 --bet_min 0.0 --bet_max 15 --vg 38.9 --ll_0
浏览 0提问于2013-06-06得票数 1
我有一个脚本run_md.py，它从名为test.pdb的输入文件中生成文件test.dcd。我希望使用GNU并行方式对远程服务器上的多个输入文件(test*.pdb)执行相同的命令，并将结果传输回本地计算机。因此，我使用以下命令：
parallel --trc {.}.dcd -j 2 -S $SERVER1 './run_md.py {} 1000' ::: test*.pdb
该命令按照预期的方式在服务器上运行，使用两个插槽。但是，文件没有被传回，我得到以下错误：
rsync: link_stat "/home/bougui/{.}.dcd" failed
浏览 8提问于2016-06-27得票数 0
回答已采纳
下面我有一个最小可重复的示例脚本，它将相同的情节写入两个pdf文件，首先是串行的，使用标准的for循环，然后并行使用R的foreach() %dopar%构造：
library(ggplot2)
library(parallel)
library(doParallel)
library(foreach)
# Print an arbitrary dummy plot (from the standard "cars" data set) to a
# specific integer graphical device number.
makeplot <- functi
浏览 13提问于2022-09-21得票数 0
1回答
我有一个python脚本，它使用函数从桶中临时下载文件，将它们转换为ndarray，最后将其保存到另一个桶中(最终大小为10 it )。
我需要运行这个脚本200次，所以我创建了一个sh文件run_reshape.sh，以并行执行以下布局的运行：
#!/bin/sh
python3 reshape.py 'group_1'
python3 reshape.py 'group_2'
...
我一直试图以以下方式使用GNU Parallel并行处理这些运行：
parallel --jobs 6 --tmpdir scratch/tmp --cleanup <
浏览 1提问于2021-11-08得票数 0
回答已采纳
1回答
我在子subshell函数中使用gnu并行，例如，
func()(
parallel --will-cite sleep ::: 60
)
在将SIGTERM发送到函数时，我希望并行也会被杀死。但我得到
$ func &
[1] 13255
$ pgrep -P 13255 # child of func -> the subshell
13256
$ pgrep -P 13256 # child of the subshell -> gnu parallel
13257
$ kill -TERM -- -13255 # terminating the proces
浏览 0提问于2019-02-28得票数 1
Postgres手册12说：
以下操作始终是并行受限的。
扫描公共表表达式(CTE)。
临时表的扫描。
..。
在相同的手册页：上继续下去
类似地，如果函数访问临时表、客户端连接状态、游标、准备语句或系统无法跨工作人员同步的杂项后端本地状态，则必须标记为PARALLEL RESTRICTED。例如，由于最后一个原因，setseed和random是并行受限的。
没有提到CTE。现在，我不确定是否可以将PARALLEL SAFE用于包含CTE的函数。对我来说，只有PARALLEL RESTRICTED才是有意义的。
上下文:我必须为现有的用户定义函数确定最佳标签。这个设置是新的，因为Postgre
浏览 0提问于2019-10-16得票数 7
回答已采纳
假设我有一个file，它列出了多个文件的路径，如下所示：
/home/user/file1.txt
/home/user/file2.txt
/home/user/file3.txt
/home/user/file4.txt
/home/user/file5.txt
/home/user/file6.txt
/home/user/file7.txt
我们还可以说，我希望并行地复制这些文件。我知道，通过命令parallel，我可以并行执行特定的命令，如下所示：
parallel bash -c "echo hello world" -- 1 2 3
但是，这种运行parallel
浏览 0提问于2021-07-24得票数 2
回答已采纳
1回答
并行和链接参数
、、、
嗨，我是linux的新手，学习使用终端和bash。目前，我正在运行GNU并行教程。我已经谈到了关于将参数与--链接:::+连接起来的部分
如果我尝试使用链接，终端会说未知选项，如果我尝试使用:::+，它会说没有这样的文件或目录。
我使用了错误的GNU并行版本，因为网络上的教程是针对20160822的，如果我使用man parallel_tutorial，它说是20140622。
我试图更新我的并行版本，但我似乎无法让这个链接选项工作。
浏览 5提问于2017-02-19得票数 3
回答已采纳
1回答
我正在使用GNU并行在一个目录中的多个文件上运行相同的命令。使用文档中提供的示例，我使用 find input -name *.json -print0 | parallel -0 "context --file={} --result={/.}.pdf sometex.tex" 这个命令允许我为目录中的每个json文件生成一个pdf文件。但是，当我运行此命令时，每次都会得到不同的结果。在1000个json文件中，有时我得到490个pdf文件，有时我得到800个。我还尝试按顺序运行该命令，按顺序运行可以生成全部1000个pdf文件。有人知道为什么会发生这种情况吗?我该如何解决
浏览 26提问于2021-07-01得票数 1
1回答
我们每月运行的过程中最长的部分是自动切片和将一些PDF转换成图像。每个PDF被读取，转换成3个不同的PDF，而这3个被转换成图像，放置在电子邮件中给客户。该PDF是独特的每个客户，我们发送一个每月PDF至少15,000 (经常更像22k)客户。
我们的PDF生成和切片已经是多线程的，但是我一直在研究并行化它的其余部分。
为此，我已经将我们的流程转换为使用Ghostscript.NET，它声称是一个支持并行Ghostscript的库。
为此，我将这段代码包装在一个Parallel.Foreach()循环中，在该循环中，每一次迭代都在不同的初始PDF上工作：
GhostscriptVers
浏览 6提问于2014-11-13得票数 2
回答已采纳
1回答
我有一个python脚本，它对状态缩写列表作为它的单个参数进行操作，还有一个包含所有状态缩写字符串的文本文件。
正常的电话是..。
$ mypy.py "AK"
...to在阿拉斯加运行脚本。
目前，我正在使用以下方法对从我的statelist.txt文件中提取的每个州缩写运行脚本：
$ cat statelist.txt | xargs -n 1 ./mypy.py
我现在想并行化执行，GNU Parallels看起来是正确的选择。我看到了，这应该是替换xargs -n1的语法
$ find . -name '*.html' | parallel gzip -
浏览 2提问于2014-05-29得票数 2
回答已采纳
4回答
GNU并行完全不能工作
、、、
我尝试使用GNU并行已经有一段时间了，但是我从来没有能够让它运行起来！
例如，运行(在非空目录中！)：
ls | parallel echo # Outputs single new line
ls | parallel echo echo echo # Outputs three new lines.
ls | parallel echo {} # /bin/bash: {}: command not found
ls | parallel echo '{}' # /bin/bash: {}: command not fou
浏览 1提问于2013-05-09得票数 55
回答已采纳
我使用Ghostscript通过java使用命令来呈现来自PDF的图像，但是我正在尝试运行Ghoscript，以便使用网站获取的下面的代码从PDF中运行Ghoscript进行图像呈现。
问题是，重绘过程需要两分钟以上才能生成一幅图像，虽然通过命令行需要一秒时间，但我试图通过java运行每一件事情，我想停止使用imagemagick和ghostscript作为工具，请注意，我对使用ghoscript感到满意，我不想使用任何其他工具，因为它为我提供了我需要的图像质量和大小，im使用的代码是：
public class SimpleRendererExample {
public stat
浏览 2提问于2013-09-26得票数 1
回答已采纳
我想从parallel命令在macOS上的所有潜力中获益(似乎有两个版本，GNU和Ole Tange的版本，但我不确定)。
使用以下命令：
parallel -j8 find {} ::: *
如果我位于一个包含8个子目录的目录中，我将有一个很大的性能。但是，如果所有这些子目录都有一个小的内容，除了一个，我将只有一个线程，将工作在唯一的“大”目录。
是否有一种方法来遵循这个“大目录”的并行化？我的意思是，唯一的线程是否可以由其他线程(以前在小子目录上工作的线程)来帮助？
理想的情况是，当find命令在上面的命令行中找到所有的小潜艇时，并行命令“自动切换”。也许我要求太多了？
如果存在另一种可
浏览 0提问于2020-08-09得票数 4
回答已采纳
2回答
OpenMP在C++中的应用
、、、、
我一直在寻找一种使用多线程为C++ 实现Timsort的方法，并且尝试在这个过程中使用。我确信我使用的是正确的编译器标志，但是每当我尝试使用Tim排序时，我都会这样做：
#pragma omp parallel shared(DataVector)
{
gfx::timsort(DataVector.begin(), DataVector.end(), comp_1);
}
注意:正在排序的数据是包含单个单词字符串的向量，我使用的是我自己的比较器。
在不使用OpenMP的情况下，排序的时间似乎与运行所需的时间相同。使用适当的包含时间和诸如此类的时间，我的时间值平均在.01秒内彼此之间
浏览 3提问于2015-10-16得票数 2
回答已采纳
根据问题wget download files in parallel and rename的可接受答案 cat list.txt | xargs -n 2 -P 4 wget -O 该命令的GNU并行版本是什么？ 我试过cat list.txt | parallel -N2 -j 20 --gnu "wget {2} -O {1} --no-check-certificate"，但没有成功
浏览 11提问于2019-04-25得票数 1
2回答
我试着从：http://git.savannah.gnu.org/cgit/parallel.git/tree/README执行完整的安装
安装是成功的。它在Mac上安装时运行良好，但在Amazon (RHEL64)上，我面临以下问题：
在运行parallel时，该命令将静悄悄地退出。dev dsk%并行开发-dsk%
在运行任何命令时，即使是parallel --version也会给出以下错误: dev-dsk %并行--版本并行:无效选项--“”--“--”并行选项命令--为每个参数设置参数，运行带有参数的命令，并行运行选项 --命令在运行parallel --gnu时并行运行指定的命令。
浏览 0提问于2019-04-13得票数 1
回答已采纳
1回答
给定由管道组合的几个命令组成的任务：
cat input/file1.json | jq '.responses[0] | {labelAnnotations: .labelAnnotations}' > output/file1.json
现在，有数以千计的输入JSON文件，我喜欢利用GNU并行来并行所有进程。我怎么能这么做？像这样吗？
parallel cat {} | jq '...' > output/{./} ::: input/*.json
注意:如果jq的过滤器里有一根管子，它会变得更加复杂.
浏览 0提问于2017-04-13得票数 4
回答已采纳
我想要批量加载到PostgreSQL数据库，有几个文件，并且非常大。我刚刚在上读到关于GNU Parallel和GNU SQL的文章，它看起来很棒，有人能帮我举一个使用GNU Parallel，GNU SQL和\copy或COPY来批量加载到PostgreSQL的例子吗？
浏览 1提问于2013-03-02得票数 2
我在Ubuntu Linux 18.04.4上使用GNU parallel (版本20200522)，并在一个本地服务器的所有内核减去2个内核上运行作业，也就是说，我使用的是-j-2参数。
find /folder/ -type f -iname "*.pdf" | parallel -j-2 --nice 2 "script.sh {1} {1/.}; mv -f -v {1} /folder2/; mv -f {1/.}.txt /folder3/" :::: -
然而，程序显示
Error: Cannot run any jobs.
我尝试使用-j100%
浏览 25提问于2020-06-04得票数 2
回答已采纳
1回答
我正在用Reportlab和Django生成一些pdf，使用web界面。pdf总是只有一页。我想生成一个png或jpg图像生成的网页，并返回给浏览器供用户预览，然后保存最终的pdf文件，并将其交付给最终用户。有没有办法做到这一点？
浏览 0提问于2010-11-08得票数 0
回答已采纳
我使用gnu并行在一个高性能(HPC)计算集群上启动代码，该集群每个节点有2个CPU。集群使用扭矩便携式批处理系统(PBS)。我的问题是澄清GNU并行的--作业选项在这个场景中是如何工作的。
当我运行一个调用GNU并行的PBS脚本时，没有--作业选项，如下所示：
#PBS -lnodes=2:ppn=2
...
parallel --env $PBS_O_WORKDIR --sshloginfile $PBS_NODEFILE \
matlab -nodiplay -r "\"cd $PBS_O_WORKDIR,primes1({})\"" ::: 10 2
浏览 6提问于2014-03-06得票数 9
回答已采纳
我使用ghost脚本版本"ghostscript-8.71“在我的应用程序中生成pdf文件。
在window中，它生成大小为"8.26x11.69 (A4)“pdf文件和Linux8.5x11(用于印度语言环境)。
我想让它与每个窗口环境保持一致。所以Linux也会生成相同大小的pdf文件，即"8.26x11.69 (A4)“(仅适用于印度地区)
我在“资源\初始化”目录下找到了名为"gs_init.ps“的文件，其中包含设置。我在googling上找到的ie。
找到"gs_init.ps“中的行
% /DEFAULTPAPERSIZE (a4)定义
然
浏览 3提问于2013-10-18得票数 1
我正在使用MacOS 10.15工具glocate和findutils包中的gupdatedb与brew一起工作。
我希望将shell命令"parallel“集成到脚本gupdatedb中，以便更快地构建数据库。
在脚本gupdatedb命令的原始版本中，我得到：
: ${find:=${BINDIR}/gfind}
1)我试图在上面的命令中插入parallel 命令。
通常，使用gfind，我们可以像这样使用parallel命令：
parallel --lb -j32 gfind ::: /*
选项'/*'用于查找根目录中的所有文件及其所有子目录。
所以我试着做(对于
浏览 1提问于2020-07-30得票数 1
回答已采纳
2回答
当我试图通过以下方式转换图片时：
convert image.tiff image.pdf
它消除了错误：
convert: no images defined `mosaic.jpeg' @ error/convert.c/ConvertImageCommand/3187.
我试着安装和重新安装imagick，libtiff和jpeg。但没什么用。它曾经在同一台机器上工作( Mavericks)，但是我不得不重新启动我的机器并重新安装所有的东西，现在它不能工作了。谢谢。
**(更新)问题已解决：**
安装了GraphicMagick，并且工作了！
浏览 0提问于2014-07-22得票数 0
起初，我认为这可能是一个缺少字体的问题，但据我所知，从输出中可以看出，GS正在查找字体很好。
对问题可能是什么有什么暗示吗？
$ /usr/bin/gs -dBATCH -dNOPAUSE -sDEVICE=pngalpha -sOutputFile="$RAWPNG" "$PDF_PATH/$PDF_FILENAME"
GNU Ghostscript 7.07 (2003-05-17)
Copyright (C) 2003 artofcode LLC, Benicia, CA. All rights reserved.
This software com
浏览 0提问于2018-08-21得票数 2
回答已采纳
我真的很困惑，如果有人能帮我的话，我会很感激的。
(编辑:认为这是一个模板问题，我错了)
我想用gnu的并行累加算法(存储在#include <parallel/numeric>中)添加以下类的多个副本
这门课故意不做什么，我不认为这是一个线程冲突问题？
template<class T>
class NaturalParameters
{
public:
typedef typename std::vector<T>::iterator iterator;
NaturalParameters()
: m_data(2) //vect
浏览 2提问于2011-04-24得票数 1
回答已采纳
我使用gnu并行，如下所示：
find conf/20230214/ -name "conf.yaml" | parallel run_backtest
run_backtest是一个函数，它将读取conf.yaml并运行一些代码。
当conf/20230214/中只有一个conf.yaml时，该进程的cpu使用率可达200%。
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
154561 xxx 20 0 1355764 1.1g 3608 R 200 0.1 0:32.25 bt_a
浏览 0提问于2023-02-14得票数 1
描述了如何将PDF文件线性化，使其逐页进入用户的浏览器，这样用户就不必等待整个文档下载后才开始查看。我们已经成功地使用了这样的PDF，但现在有了一个新的问题:我们想要保持逐页流式传输，但我们也想在每次提供PDF文档时在其前面插入一个新的封面。(封面将包含时间敏感信息，如日期，因此在磁盘上的PDF中包含封面是不切实际的。)
为了帮助做到这一点，有没有PDF库可以快速地将封面附加到预先线性化的PDF中，并生成可流式、线性化的PDF作为输出？最大的关注点不是合并PDF的总时间，而是我们多快可以开始将合并文档的一部分流式传输给用户。
我们试着用itextsharp来做这件事，但结果发现这个库不能输出线
浏览 5提问于2009-08-03得票数 0
我在C中使用OpenSSL来搜索一个双重安全的素数P，也就是说，我在寻找一个素数P，使得P=2p+1和p=2p'+1，并且p和p‘也是素数。这个搜索需要很长时间，所以我使用OpenMP进行多线程处理。下面是我的代码：
BIGNUM *p,*p_temp, *P, *P_temp, *temp1,*temp2;
BN_CTX *ctx;
ctx = BN_CTX_new();
p = BN_new();
p_temp = BN_new();
P = BN_new();
P_temp = BN_new();
temp1 = BN_new();
temp2 = BN_new();
in
浏览 2提问于2018-01-18得票数 0
在带有Bitnami WordPress堆栈的Azure上的Ubuntu18.04.4LTS上，我试图让Imagemagick和Ghostscript工作，这样WordPress就可以创建PDF缩略图。一个简单的转换测试会出现一个错误。当我搜索错误信息时，它们会带我深入各种关于缺少库的兔子洞，手动添加符号链接，从源代码编译等等。运行一个流行的图像转换程序似乎并不困难。我遗漏了什么？
以下是版本和失败的测试：
/tmp$ sudo apt update
All packages are up to date.
/tmp$ sudo apt install imagemagick
imagemag
浏览 0提问于2020-07-13得票数 1
回答已采纳
1回答
与rsync并行的GNU
、、、
我试图使用ssh和GNU parallel并行运行一些GNU parallel实例。我正在运行的命令如下：
find /tmp/tempfolder -type f -name 'chunck.*' | sort | parallel --gnu -j 4 -v ssh -i access.pem user@server echo {}\; rsync -Havessh -auz -0 --files-from={} ./ user@server:/destination/path
/tmp/tempfolder包含前缀为chunck的文件，它们包含实际的文件列表。
使用这个命
浏览 7提问于2014-03-26得票数 7
1回答
如果我使用GNU并行来包装一个使用pv (管道查看器)命令的命令，它就会丢失该命令的进度输出。
例如，如果我运行以下pv命令，它将显示我的gzip的进度：
› dd if=/dev/urandom bs=256m count=1 | (pv --progress -s 256m --bytes | gzip > /dev/null)
208MiB [=============================> ] 32%
..。效果很好。但是，如果我用GNU并行包装相同的命令：
浏览 3提问于2021-03-23得票数 2
回答已采纳
4回答
使用GNU parallel：
我有一个接受两个参数的程序，例如
$ ./prog file1 file2
$ ./prog file2 file3
...
$ ./prog file23456 file23457
我使用的是一个生成文件名对的脚本，但是这带来了一个问题，因为脚本的结果是一个单一的字符串，而不是一个对。像这样：
$ ./prog "file1 file2"
GNU parallel似乎有一系列的技巧，我想知道是否有一个分隔符拆分文本：
$ generate_file_pairs | parallel ./prog ?
# where ? is text
浏览 2提问于2011-06-07得票数 45
回答已采纳
我有PDF，我需要转换成图像。我安装了Imagemagick。我有一个名为a.pdf的PDF，我可以打开它(它没有损坏)在文件夹C：\转换\
在命令行中我正在尝试
C:\Convert>convert a.pdf a.jpg
而我正在接受错误。
convert.exe: FailedToExecuteCommand `"gswin32c.exe" -q -dQUIET -dSAFER -dBATCH -
dNOPAUSE -dNOPROMPT -dMaxBitmap=500000000 -dAlignToPixels=0 -dGridFitTT=2 "-sDEV
浏览 18提问于2015-09-08得票数 64
回答已采纳
当将选项--jobs指定给GNU parallel时，这到底意味着什么？
我执行：
parallel --jobs 10 ./program ::: {1..100}
其中，program是一项密集的任务，而且任务是完全独立的。{1..100}表示每个任务的符号输入。当我检查在PC上运行的进程时，我发现很多时候只有不到10个作业同时运行。
那么，--jobs究竟指定了什么呢？
浏览 0提问于2016-03-22得票数 10
1回答
GNU并行从网页运行
、、、
我正在做一个演示，并使用GNU并行来并行运行我的网络爬虫，以帮助减少整体时间。我从一个php文件运行它，如下所示：
<?php
....
exec(" parallel -j 8 < commands.txt", $output);
....
?>
当我从终端运行这个文件时，它工作得很好，并且完成了commands.txt文件中给出的所有抓取工作，但是当我尝试从网页(调用这个php文件)运行它时，parallel给我以下错误：
parallel: Warning: $SHELL not set. Using /bin/sh.
Use of
浏览 0提问于2013-07-10得票数 2
我正在尝试使用Solaris 11中的parallel命令和以下命令运行一些作业：
find . -name "job*" | parallel -P 64 :::
CWD有我需要运行的脚本文件job1...job256。这些文件有几个变量定义，通过运行./job1 & ./job2 & etc可以很好地运行
然而，当我运行该命令时，我从gnu parallel中得到了以下错误：
/usr/bin/bash: 1: command not found
...
/usr/bin/bash: 1: command not found
256倍
这些过程在我的Debi
浏览 1提问于2016-05-28得票数 1
我正在尝试转换一些PDF文件(用FastReports生成)到PCL，使用Ghostscript，它工作得很好，除了带有重音的单词显示错误的字符。
下面是我调用ghostscript的方式：
bin\gswin32c -dBATCH -dNOPAUSE -sDEVICE=pxlmono -sFONTPATH=C:\Windows\Fonts -dDuplex -dFirstPage=1 -dLastPage=2 -sOutputFile=Parte.pcl -fParte.pdf
这是我的原始PDF：
这是PCL的结果：
我猜问题出在字体上，因为它说找不到字体Arial和Verda
浏览 0提问于2019-06-26得票数 0
我创建了一个脚本来验证(大量的)项目，它以一种连续的方式(一个接一个)进行验证，脚本的最终结果需要大约9个小时才能完成。看看如何改进这一点，我发现GNU并行，但我有问题，使它的工作。
项目列表在文本文件中，因此我执行了以下操作：
readarray items < ${ALL_ITEMS}
export -f process_item
parallel process_item ::: "${items[@]}"
问题是，我收到了一个错误：
GNU parallel: Argument list too long
通过查看类似的文章、、，我了解到这更多地是一个Linux限
浏览 3提问于2017-06-07得票数 3
回答已采纳
我正在构建一个微服务，其中涉及使用azure节点函数从pdf生成缩略图。我可以找到一些库，比如pdf-thumbnail来将pdf转换成缩略图，但是因为它们有二进制依赖关系(需要安装imagemagick和ghostscript )，所以它在azure函数app上不起作用。如何在azure节点函数应用上安装本机可执行文件？或者有没有什么javascript的节点库可以从pdf生成缩略图？
浏览 11提问于2019-09-26得票数 1
1回答
将Webp转换为PDF
、、、、
我想把一堆Webp图像转换成单独的PDF。我可以用这个命令来做：
parallel convert '{} {.}.pdf' ::: *.webp
或者我可以使用FFMPEG命令：
find ./ -name "*.webp" -exec dwebp {} -o {}.pdf \;
然而，在转换过程中，对Webp文件进行解码，得到的PDF文件的文件大小要大得多。当我使用上述命令进行JPG到- PDF转换时，PDF大小与JPG图像大小相当接近。
此命令适用于JPG，但程序img2pdf不适用于Webp格式：
find ./ -name "*.jpg"
浏览 0提问于2018-01-15得票数 3
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
