1回答
为了在分布式设置中处理数据，可以执行任务并行化或数据并行化。到目前为止，我只遇到了数据并行化。例如，对我来说，MapReduce是数据并行化，因为您会将数据划分为不同的映射器。像桶排序这样的算法也是数据并行<
浏览 0提问于2019-01-07得票数 0
回答已采纳
它对图像进行批量处理。我不知道这些图像会有多大，以及我的应用程序将在什么硬件上运行--它们都取决于用户。
我使用GCD并行处理图像，因为它确实可以加快吞吐量。然而，在某些情况下，过多的并行化可能会造成伤害:如果用户处理高分辨率图像，并行化会造成太大的内存压力，系统的性能会变得非常差。因此，我希望找到一种方法，以最大限度地提高并行化，同时保持RAM中的工作负载(因此没有任何触发分页和交换:我希望避免磁盘IO)的速度“喂
浏览 1提问于2017-10-14得票数 0
回答已采纳
3回答
当要处理的数据量很大时，有人可以推荐在C++中并行化的方法吗？我已经读到过openMP和英特尔在C++中用于并行化的TBB，但还没有尝试过。对于并行数据处理，哪种方法更好？还有其他的库/方法吗？
浏览 1提问于2010-10-04得票数 3
回答已采纳
所以我在spark中使用了groupByKey函数，但是它没有被并行化，因为我可以看到在它的执行过程中，只使用了一个核心。我正在处理的数据似乎不允许并行化。是否有一种方式可以知道输入数据是友好的并行化，还是不合适的RDD？
浏览 2提问于2014-11-08得票数 1
回答已采纳
1回答
卡雷特的train函数将执行并行化，例如，为k折叠CV中的每一次迭代运行一个进程。registerDoMC函数)，通过插入符号的train函数设置nthread=1，以便将该参数传递给xgboost，在trainControl中设置allowParallel=TRUE，并让caret处理交叉验证的并行化；或
禁用插入并行化(allowParallel=FALSE和无并行后端注册)，并将nthread设置为物理核数，因此并行
浏览 4提问于2016-09-16得票数 12
回答已采纳
5回答
我必须为我的大学项目并行处理一些c++应用程序。但是，我想不出任何不是很大并且可以并行化的应用程序。我想听听你们的建议。谢谢
浏览 4提问于2011-10-21得票数 0
回答已采纳
我想知道在Spark中拥有可序列化函数的确切原因，并想知道如果可能的话，想知道场景，那里可能会因为序列化而出现问题。据我所知，为了确保seam less没有副作用的并行处理，而不是像命令式范例那样发送数据，函数将被发送到节点，数据将被并行处理。当我们传递函数时，是不是函数可序列化背后的安全原因？
提前谢谢。
浏览 0提问于2015-08-06得票数 1
我想知道，通常情况下，如果程序的一部分可以安全地并行化，从而获得显著的性能提升，我们应该这样做吗？还是我们需要考虑这项工作的重要性，因为它会影响可伸缩性。当你决定并行化的时候，你的思维过程是什么？例如，在我的应用程序中，用户可以将图形数据结构提交到服务器端进行处理。每个节点可以独立地并行处理，并且是非阻塞的IO工作.用户平均提交3-4个节点，但可能高达100个.平均来说，一个节点需要大约1秒的时间来处理。在这种情况下，并行化<
浏览 0提问于2019-12-11得票数 0
1回答
我想并行我的MCTS程序。有几种方法可以做到这一点：
由于Python 中的多进程具有创建独立子进程
浏览 1提问于2018-10-01得票数 2
回答已采纳
1回答
宽度优先搜索的并行化
、、、
基本上，我试图在c++中并行化一个广度优先搜索程序，每个节点都需要很长的时间来处理。下面是一个示例代码：q.push(head); node* currNode = q.front(); doStuff(currNode); }处理函数doStuff()非常昂贵，我想并行化它。但是，如果我在for行前面放置#pragma o
浏览 4提问于2017-05-20得票数 4
回答已采纳
我有一个要处理的记录集合，并且处理可以并行化，所以我创建了一个 (通过 )。单个记录的处理本身是由可并行化的步骤组成的，所以我想使用另一个ExecutorService。
浏览 0提问于2008-12-15得票数 7
回答已采纳
最近，它停止处理以下消息：aes128-ctr,aes256-ctr,arcfour256,arcfour我阅读了这的文章，其中概述了以下内容：SSH中是否需要“加密并行化”？
浏览 0提问于2014-08-08得票数 18
回答已采纳
1回答
该脚本使用Python的Multiprocessing模块通过派生30个并行子进程来进行并行处理。我现在需要编写一个PBS脚本，以便从另一个服务器远程调用该脚本。然后脚本将使用多处理模块进行并行化。2.将脚本改为串行处理，然后使用PBS提交30个具有不同并行化参数的作业。
有人能给我一些关于不同方法的利弊的线索吗？谢谢。
浏览 1提问于2015-02-19得票数 1
4回答
VTK到底有多好？
、、、
我从开发人员那里听到了一些对可视化ToolKit (VTK)的好评。但是它到底有多强大呢？例如，它可以处理具有数十亿个网格点的整个油藏(在模拟器中)的可视化吗？大多数工业油藏模拟器都运行在并行处理器上。我知道VTK支持并行处理，但再说一次，当运行像油藏模拟这样的东西时，它利用并行处理器的稳定性如何？有人在如此大规模的项目中使用过VTK吗？那么，有没有人知道除了3DSplice之外，VTK还可以用于强大的可视化功能？另
浏览 5提问于2009-09-15得票数 24
回答已采纳
2回答
并行化数据处理
、、
由于data非常大，所以我试图并行化这个操作：endError: syntax: invalid assignment location
循环完成后，我希望所有处理器都可以使用
浏览 2提问于2016-07-19得票数 2
回答已采纳
4回答
线程化与并行处理
、、
微软.NET 4.0为其框架引入了新的“并行增强”。我想知道使用标准System.Threading函数的应用程序与新的并行增强有什么不同。
浏览 0提问于2010-02-25得票数 39
回答已采纳
2回答
在理解FPGA对并行处理的好处方面，我遇到了一些问题。每个人都认为它是平行的，但在我看来，它并不是一成不变的平行。让我们看看这个例子：
我的数据信号出现在某个引脚上，每时钟周期1位。FPGA将接收这些数据，并且由于它已经在集成电路中得到数据，所以它可以立即开始处理。但这叫做串行处理，而不是并行处理。如果FPGA等待数据积累，然后并行处理，则可以说FPGA处理是完全并行的，但是等待大量数据到达有什么好处呢?如果我们等待
浏览 9提问于2016-02-10得票数 2
回答已采纳
如何并行化具有if条件的for循环。如果满足该条件，则不需要继续循环。如果我可以使用多重处理来实现这一点，那就太好了。for i in xrange(N): if x == 0:上面的代码能在Python中并行化吗？
浏览 5提问于2016-03-18得票数 2
回答已采纳
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号