"当使用python的子进程和rsync时,"filedescriptor超出select()中的范围"
当使用Python的子进程和rsync时，"filedescriptor超出select()中的范围"这个问题可能是由于文件描述符的数量超出了select()函数的限制。在Python中，select()函数可以监视文件描述符的变化，但是它只能处理一定数量的文件描述符。当文件描述符的数量超出select()的限制时，就会出现这个问题。
为了解决这个问题，可以考虑以下几种方法：
- 使用更高效的I/O多路复用技术，如epoll（Linux）或kqueue（BSD），这些技术可以处理更多的文件描述符，而且性能更好。
- 使用多线程或多进程来处理不同的文件描述符，这样可以避免单个进程处理过多的文件描述符。
- 使用更高级的异步I/O库，如asyncio（Python）或libuv（Node.js），这些库可以更好地处理大量的文件描述符，并且提供更简单的编程接口。
推荐的腾讯云相关产品：
- 腾讯云服务器：提供高性能、高可用的云服务器，支持Linux和Windows操作系统，可以满足不同应用场景的需求。
- 腾讯云数据库：提供MySQL、MongoDB、Redis等多种数据库服务，可以满足不同应用场景的需求。
- 腾讯云容器服务：提供Docker容器管理服务，支持Kubernetes集群部署，可以满足容器化应用的需求。
产品介绍链接地址：
相关·内容
它可以工作，但在一段时间(大约10天)后，服务不可用，并显示错误：'filedescriptor out of range in select()'，但是重启服务解决了这个问题。, xlist = select.select(read_set, write_set, [])是否存在导致错误的未关闭文件描述符？看起来子<e
浏览 29提问于2011-10-08得票数 6
1回答
--version我有一个问题，我一直在调试失败，我试图通过子进程和python运行多个rsync命令。所发生的情况是，第一个rsync将工作，有时第二个命令也会工作，根据strace，在任何时候子进程都会在显示为超时的情况下间歇停止：当<
浏览 0提问于2018-01-09得票数 0
回答已采纳
3回答
我正在运行一个备份脚本，该脚本启动子进程以通过rsync执行备份。但是，我没有办法限制它一次启动的rsyncs的数量。下面是实际启动rsync (从do_backup函数内部)的代码，其中command是一个包含rsync行的变量：subprocess.Popen(command, stdout=subprocess.PIPE, shell=True)如果我在do_backup函数<e
浏览 5提问于2014-10-28得票数 4
回答已采纳
在我读过的一些关于Angular observables的教程和文档中，我看到了很多关于取消订阅订阅会导致内存泄漏的警告(除非在组件的模板中使用异步管道)。我在我的应用程序中有一些支持类，我在其中创建自定义观察点，但我想知道，如果观察点和所有订阅者都超出范围，取消订阅它们是否重要。例如，我有一个父类，它包含数组中的子对象的映射。父级为每个子级订阅
浏览 40提问于2020-04-14得票数 0
回答已采纳
我想在gnome3外壳扩展的javascript中的GLib绑定中使用spawn_async生成一个进程。我需要一些类似于python文档中的“filedescriptor”参数，当启用该参数时，它将向进程的stdout返回一个filedescriptor。python API和C API在这一点上有很大<em
浏览 0提问于2011-08-15得票数 1
回答已采纳
2回答
我正在创建一个python脚本，它使用子进程运行rsync，然后获取标准输出并打印出来。和一个代码片段：
self.rsyncRun = subprocess.Popen(["rsync
浏览 1提问于2012-01-26得票数 2
1回答
我正在创建一个python脚本，它使用子进程运行rsync，然后获取标准输出并打印出来。该脚本使用以下代码基于conf文件运行多个rsync进程： username = parser.get(share, 'username,local,remotedir,"--log-file="+rsynclog], stdout=subproc
浏览 0提问于2012-01-26得票数 3
回答已采纳
我使用子进程模块运行bash命令。我想实时显示结果，包括当没有添加新行时，但是输出仍然是修改的。 yield line.decode('utf-8')
for l in run(cmd):
print(l)
浏览 0提问于2018-12-22得票数 3
关于Python中的多处理，我有一个更一般的初学者问题(如果我在下面的内容完全错误，请原谅我)。假设我并行地启动了两个或更多的Ipython控制台，并通过这些控制台运行一些独立的函数/脚本，这是否意味着这些任务在多个核心上执行(每个任务一个核心)？如果是，那么在“主模块”中收集任务并使用multiprocessing库更好吗？
浏览 2提问于2017-01-15得票数 0
回答已采纳
3回答
我正在尝试使用带有python脚本的raspberry pi自动执行备份，该脚本会将EC2实例CAMSTEST1和CAMSProd上的所有内容都同步到本地NAS。#!","-P","-v","--rsync-path","sudo rsync","--remove-source-files","--recursive
浏览 6提问于2021-10-21得票数 2
1回答
我需要在windows 7 x64中运行Python2.7应用程序中的rsync (使用cwRsync 5.5.0)。从命令行开始，一切运行良好:将env中的CWRSYNCHOME设置为cwrsync二进制文件，然后运行以下命令但是，当试图运行与python</
浏览 4提问于2016-01-01得票数 1
回答已采纳
我正在使用Django，芹菜和通道(带有redis后端)来处理基于Dajngo后端的任务。最近，随着事态的发展，我面临的问题是：Traceback (most recent call last):, xlist, 0)
ValueError: filedescriptor out of range i
浏览 7提问于2020-11-29得票数 0
虽然这里已经有很多关于python中不同变量的存在的问题和答案，但我想了解它们如何在应用程序范围和端点范围方面转换为django环境。我可以加载全局缓存，检索只读对象到它，然后刷新全局，用新的数据加载它。原始只读对象仍然返回它们最初加载的值，新请求将使用新的数据值。我要确认的是，只要服务器正在运行，并且只使用直接调用load_cache()<em
浏览 0提问于2016-12-20得票数 1
回答已采纳
现在这是空的。我需要rsync来执行mkdir -p而不是mkdir，因为我需要在4级(即当dir_1、dir_2和dir_3不存在时处于/data/dir_1/dir_2/dir_3/filename )的文件。如果手动创建所需的子目录，则可以使用以下命令执行rsync：
rsync -avz source_diretory/ /data
浏览 0提问于2014-12-14得票数 7
回答已采纳
1回答
我在Mercurial中有一个Python应用程序。在应用程序中，我发现需要显示它当前运行的提交。到目前为止，我找到的最好的解决方案是使用hglib。import hglib [p] = repo.parents()它使用hglib查找使用过的版本，并将结果存储在一个变量中，我
浏览 3提问于2015-07-03得票数 1
回答已采纳
当我试图用python编写脚本时，我有一个基本的知识洞。foo.py，python脚本运行在say PYTHON_SUBPROCESSWithin foo.py中是对subprocess.run(...)的调用，这个子进程命令运行在say `SUBPROCESS_SUBPROCESSWithinfoo.py is subprocess.run(..., shell=True)中，这个子进程命令运行在say SUBPR
浏览 6提问于2022-03-13得票数 1
回答已采纳
13回答
我想在Windows中subprocess.Popen() rsync.exe，然后用Python打印标准输出。p,
浏览 1提问于2009-10-22得票数 100
对于rsync守护进程模式，rsyncd.conf有以下选项：
如果"use“为真，则rsync守护进程将在与客户端开始文件传输之前先将其发送到"path”。这具有防止可能的实现安全漏洞的额外保护的优点，但它的缺点是需要超级用户特权，无法跟踪绝对或新根路径之外的符号链接，并使用户和组的名称保存复杂化(见下文)。作为附加的</
浏览 1提问于2018-06-05得票数 2
5回答
Python性能-最佳并行方法
、、、、
我正在实现一个Python脚本，它需要在每一个不到5秒的时间内并行地发送1500+数据包。多线程:由于Python的限制，我认为我无法实现我的愿望。
多处理:这似乎是最有效的方法。但是，由于过多的进程，我正在运行脚本的VM冻结了(当然，1500进程运行)。因此变得不切实际。Multiprocessing+Multithreading:在这种方法中，我创建了更少的进程</
浏览 15提问于2016-10-24得票数 24
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
