我听说，在多核服务器上的linux下，如果只有一个进程但有多个线程，就不可能达到最好的性能，因为Linux对IO有一些限制，因此在8核服务器上有8个线程的一个进程可能比8个进程慢。更新:我担心除了我自己实现的锁定之外，还有更多与IO相关的问题。在多个线程中执行模拟的网络/磁盘IO</em
浏览 5提问于2010-08-31得票数 30
回答已采纳
2回答
根据，至少从编程/应用程序接口的观点来看，可以使用AIO在linux上容易地实现异步磁盘文件io。现在，我不是一个linux程序员，我只是想找到一种简单的方法来支持linux上的异步磁盘文件io，学习它并将其添加到我个人项目所需的异步磁盘io库中。目前，我在windows上使用overlapped io，在非windows平台上使用io worker线程。由于多线程解决方案可能比较棘手，因
浏览 3提问于2011-12-15得票数 10
回答已采纳
2回答
它托管在亚马逊ec2 (amazon linux)上，ebs卷attached.Index驻留在ebs.During merge上，io限制已达到并导致问题。有没有办法在进程级别或特定磁盘级别限制iops？或者我们可以放慢solr合并的速度吗？谢谢
浏览 0提问于2011-05-30得票数 2
回答已采纳
这可能有点OT，但我想知道为什么拥有一个大量使用IO的进程(例如，从一个位置到同一磁盘上的另一个位置的cp大文件)会减慢一切，即使是主要受CPU限制的进程。我注意到我在两个操作系统上都大量使用(mac OS x和linux)。特别是，我想知道为什么多核在这里没有真正的帮助:这是商用硬件(磁盘控制器等)的硬件限制，还是操作系统的限制，或者在分配正确的资源(调度)方面存在固有的困难？
浏览 5提问于2010-11-27得票数 18
回答已采纳
2回答
基于权值的VMs块IO控制
、、、、
我正试图限制为越南船民提供的资源。我可以使用libvirt/cgroup限制分配给VM的CPU和内存。现在，我想通过应用一些权重来控制分配给每个VM的磁盘时间。我查看了cgroup的blkio控件。因为VM只是一个Linux进程，所以我可以使用cgroup，但我不确定它是否也适用于异步IO。如果没有，有人能提出一个好的替代解决方案吗？
浏览 0提问于2011-07-23得票数 13
回答已采纳
1回答
我已经创建了一个减少内存和CPU核计数的Linux虚拟机，但是与最终的硬件相比，它们仍然太快了。是否有可能降低虚拟机中的CPU时钟速度/ram速度/磁盘速度来模拟低性能硬件，或者有其他方法在我的开发机器上获取相关的分析数据？考虑到应用程序正在处理数千兆字节的数据，我认为磁盘访问是一个主要的瓶颈，限制磁盘速度可能会有所帮助。我可以使用任何运行在真实或虚拟机上的Windows/Linux/MacOS上的工具/方法(如大多数开放源码和商业可用的
浏览 4提问于2020-08-31得票数 1
我想分析缓慢光盘存储对我的应用程序的影响。为了做到这一点，我想减少对存储的写思想。我可以通过某种配置来完成这一任务，或者是否有任何工具专门用于此？
浏览 0提问于2017-07-19得票数 2
1回答
背景：我对io_uring潜在的性能提升非常感兴趣，但我对C、Linux内核或块设备的内部工作方式还不太熟悉，无法实现有意义的基准测试。使用同步IO，最初的方案使用2个syscalls (1个写+1个同步)，而int-per方法使用惊人的20 (10写+ 10同步)。就syscalls而言，io_uring节省将是巨大的:只要提交一个io_uring，我就可以实现相当于20个syscalls的功能。我不清楚的是，一旦提交完成，Linux机器的其余部分将如何扩展。大多数磁盘</em
浏览 0提问于2020-04-12得票数 4
/proc/mdstat显示它以预期的速度前进，但iotop显示磁盘在所有方面都是空闲的。它没有显示IO，我猜这是由内核线程md127_resync执行的，尽管man iotop提到了内核线程。我们如何解释这个IO没有出现在iotop中？这一解释是否意味着其他类型的IO也不会出现？
我在用Debian 9。
浏览 0提问于2017-09-09得票数 2
回答已采纳
2回答
如果磁盘出现问题，磁盘驱动程序通常会重试。例如，有时Linux SCSI驱动程序会从SCSI驱动器获得BUSY状态，然后重新发送IO。上层(如FS)将一直等到: 1.磁盘驱动器无法处理IO错误，直接上报错误。2.磁盘驱动程序仍在重试，但发生超时。谢谢!
浏览 1提问于2011-04-08得票数 7
1回答
高磁盘IO确保硬关闭，无论操作系统。我已经确定肯定需要一个新的服务器。
然而，现在，我面临的挑战是备份驱动器的内容，而不造成高IO。我已经用一个IOps限制配置了cgroup，看看它有多高，而不会导致关闭。结果似乎与每个磁盘略有不同，但平均大约100个iops似乎在崩溃前工作一段时间。控制IO似乎有效，但这是一个令人厌烦的过程，因为当服务器关闭时，我必须重新设置它。我正在使用Runtime (Knoppix叉)将数据从驱动器复制到外部驱动器。仅供参考，这是帮助我设置限制
浏览 0提问于2014-08-14得票数 1
回答已采纳
1回答
我想在rails应用程序中使用linux配额来限制用户在磁盘上的空间使用。但我目前的实现将保存用户的附件，因为它们属于启动rails应用程序的人。是否需要在linux服务器上创建每个用户并为其分配磁盘配额？
那么，有没有什么rails插件/gem允许我这样做呢？什么是github解决方案？它们不仅限制了附件的大小，还限制了用户的git存储库。
浏览 0提问于2012-02-07得票数 0
回答已采纳
1回答
我知道%iowait的定义是现在以一个简单的Linux系统为例，它有一个mdraid1和两个磁盘。/proc/mdstat显示，重同步的运行速度约为120 to /S，接近于您对常规旋转SATA磁盘的期望。因此，磁盘的速度是这个例子中的限制因素，因此，从上面的定义来看，我希望iowait达到近100%，因为这就是阻止进程在较短的时间内完成的原因。
浏览 0提问于2013-05-23得票数 1
回答已采纳
1回答
正如在中提到的，当使用libaio.Okay时，libaio在没有O_DIRECT的情况下工作得很好，但是：
根据R.Love的Linux编程书，只有使用O_DIRECT.But打开一个小程序(使用aio.h
浏览 4提问于2012-01-07得票数 56
回答已采纳
我知道较慢的磁盘将限制速度，而较小的磁盘将限制大小。在我的例子中，这将与主板的机载raid有关。我会对Windows和Linux的情况感兴趣。
浏览 0提问于2009-07-09得票数 2
回答已采纳
3回答
考虑有N个文件要完全写入磁盘(即从所有文件缓冲区刷新)。如果我们按顺序逐个写入和刷新文件，那么我预计大约需要时间N*seekTime + N*writeTime，其中seekTime是将硬盘磁头定位到适当扇区的时间(这可能需要整个磁盘旋转的时间)，writeTime是磁盘顺序写入64KB数据所需的时间。在来自OS的一些支持下，可以通过重新安排文件写入和刷新的顺序来实现性能改进，使得考虑到磁盘旋转(即，磁头在磁盘上的当前位置)，重新安排文件操作，以便从几乎不需要旋转的文件操作(即，最接近磁盘</em
浏览 2提问于2015-07-15得票数 4
我如何知道RAID 0 (mdadm创建选项)在临时驱动器之间的最佳配置是什么？
浏览 0提问于2012-08-01得票数 0
1回答
当我学习异步磁盘io时，我正在阅读有关从磁盘中服务大型文件的文章，听说它在FreeBSD中比Linux更受支持。
我的问题是:异步磁盘IO是否会影响交换空间的性能，因为交换分区将执行大量磁盘读写操作。我有在Linux(Ubuntu)上工作的合理经验，我更喜欢在应用程序中使用它。
浏览 0提问于2014-06-07得票数 1
回答已采纳
2回答
我正在为Linux内核开发一个新的IO调度器。我想看看是否有人知道在Linux中有一个工具可以打印出未完成的IO请求(磁盘IO队列)的总数？谢谢!
浏览 19提问于2012-11-29得票数 14
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
