腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Python
Pandas
内存
泄漏
?
、
、
然而,几个小时后,
Python
就崩溃了。在Windows和(单独的) Linux机器I上都经历过这种情况后,我注意到问题是
Python
正在慢慢地吸收机器的
内存
,直到没有更多的
内存
,然后它当然就崩溃了。谷歌告诉我,其他人在过去使用
Pandas
时也有记忆问题。我试着在每次迭代中添加垃圾收集器行,例如here,但对我不起作用。我还没有试过mutiprocessing approach,因为它看起来像是用核弹杀死了一只蚂蚁,而且可能会带来其他并发症…… 像这样继续使用
Pandas
有什么解决方案吗
浏览 203
提问于2021-10-29
得票数 0
1
回答
内存
消耗
Python
Pandas
内存
泄漏
、
、
、
我面临着
Python
和
Pandas
的记忆问题,for i in range(5):df是从数据库中读取的熊猫数据,每次迭代都增加了1GB的弹性
内存
,所有的迭代都从数据库中检索相同的数据。根据我的观点,对于每个迭代,弹性
内存
不应该增加,因为变量df超出了范围(在新的迭代中)。结果是,经过一些迭代之后,弹性
内存
最多增加了12 Gb,我得到了错误的OutOfMemory。db_contr
浏览 1
提问于2017-09-20
得票数 2
3
回答
如何查找
pandas
的
内存
泄漏
、
、
、
original_df[original_df.month == month].copy() print(result)你有什么建议如何找到
内存
泄漏
吗?
python
不应该自动识别不再使用的变量吗?)) something = df.copy()
内存
<e
浏览 2
提问于2017-07-25
得票数 8
1
回答
如何检查Guile扩展模块中的
内存
泄漏
?
、
、
、
这个扩展模块嵌入了一个
Python
解释器。 由于此扩展模块调用
Python
解释器,因此我需要验证它是否正确地管理
Python
对象占用的
内存
。我发现
Python
解释器在自己的
内存
处理中表现良好,因此,如果没有其他干扰因素,通过运行valgrind,我可以发现由于我自己的
Python
解释器嵌入代码中的bug而导致的
内存
泄漏
。但是,当我在valgrind下运行Guile时,valgrind报告
内存
泄漏
。这
浏览 0
提问于2008-09-17
得票数 8
回答已采纳
1
回答
DataFrame .loc
内存
泄漏
、
、
、
我通过这段代码发现了
Pandas
的另一个
内存
泄漏
: store = pd.HDFStore(hdf[0]) fac = pixel[4][::2]100%的计算机
内存
在几秒钟内就达到了我使用的是Debian2.30,英特尔i5,8 GB
内存
。 我相信这与以
浏览 2
提问于2014-03-26
得票数 4
2
回答
获取DataFrame的一小部分时不会释放
内存
当我这么做时:
内存
没有释放。 您可能会争辩说,它已经发布,但是它似乎被使用了,但是它被标记为是免费的,并且将被
Python
重用。但是,如果我尝试创建一个新的800 k行DataFrame,并且只保留一小部分,那么
内存
的使用量就会增加。如果我再做一次,它就会无限地长出来。我使用的
Python
3.4.2和
Pandas
0.18.1和numpy 1.11.1。/usr/bin/env
python</em
浏览 2
提问于2016-07-03
得票数 0
回答已采纳
1
回答
使用
python
2.7时
内存
泄漏
、
、
、
我正在运行使用C++和
python
的gem5模拟器,并且添加了更多的代码。当我使用
python
2.6时,一切都很好,但是在使用
python
2.7的系统上,相同的代码有非常高的
内存
泄漏
。代码太大了,我不知道
内存
泄漏
的来源在哪里。我检查了几次代码,似乎每个对象都被删除了。 是不是跟
python
版本有关?如何查找
内存
泄漏
的来源?
浏览 1
提问于2016-02-28
得票数 1
2
回答
在我的应用程序中嵌入
python
时
内存
泄漏
、
、
、
、
当链接到
python
2.7.13并在Windows 10上运行时,下面的程序缓慢但稳定地
泄漏
内存
。#include <
Python
.h>{ //PyGC_Collect(); Py_Fina
浏览 18
提问于2017-03-23
得票数 2
回答已采纳
2
回答
垃圾收集器是否跟踪所有
Python
对象?
、
、
我正在尝试调试
内存
泄漏
(参见问题)。 当垃圾收集器运行时,它是否可以访问由
Python
解释器创建的所有
Python
对象?如果我们假设
Python
C库没有
泄漏
,那么RSS
内存
使用量是否应该随着GC对象数量的增加而线性增长?那sys.getobjects呢?
浏览 3
提问于2010-11-02
得票数 4
回答已采纳
1
回答
在
python
中使用elasticsearch parallel_bulk时的
内存
泄漏
、
、
python
进程似乎在不断增加
内存
使用量。
浏览 47
提问于2020-09-02
得票数 0
1
回答
是否有可能隐藏安全的
内存
泄漏
,防止在visual中检测
泄漏
?
、
、
在visual中,是否有任何方法可以隐藏安全的
内存
泄漏
以避免正常
内存
检测?我使用此调试标志检测
内存
泄漏
:我只是花了很多时间研究如何将Boost.
Python
也就是说,在我意识到灵魂崩溃之前,
Python
集成有一个
内存
漏洞。这似乎是一个已知的问题,不会是固定的。由于
内存
泄漏
保持不变,他们说
浏览 2
提问于2014-05-22
得票数 3
回答已采纳
1
回答
确定mod_wsgi中
python
数据的大小
、
我有Django应用程序,它在执行某个视图时会
泄漏
内存
。
泄漏
不会通过使用./manage.py runserver来重现,所以我怀疑它会在我的堆栈中的其他地方
泄漏
。mod_wsgi作为Apache的一部分运行,因此在top中,我只看到httpd进程会迅速占用
内存
。为了确保它不在我的
Python
应用程序中,我想以某种方式了解httpd实际占用了多少
内存
给我的
python
浏览 2
提问于2013-10-21
得票数 0
回答已采纳
1
回答
推土器用于检查
内存
泄漏
、
、
、
我有一个运行在django,gunicorn和nginx上的
python
应用程序,一切都运行得很好,但我遇到了一些
内存
问题。在运行此应用程序时,它的进程消耗了大部分
内存
,一段时间后,应用程序变得很慢。但问题是我无法在我的环境中配置这个应用程序。另外,请让我
浏览 4
提问于2014-01-22
得票数 0
1
回答
Python
-C++接口中的
内存
泄漏
?
、
、
我有一段带有
python
-C++接口的C++代码,需要使用
python
列表作为输入来重复调用这些代码。我发现即使是伪进程也会导致
内存
泄漏
:a = [1.0]*1000 dummy(a, 1)static PyObject* dummy(PyObject* self, PyObject* args) {} 我是不是遗漏了什么,所以引入了
内存
泄漏</em
浏览 3
提问于2012-12-06
得票数 4
2
回答
Python
:带有结构的CTypes
内存
泄漏
、
、
Python
ctypes是否存在已知的
内存
泄漏
?我正在编写一个
Python
脚本,其代码类似于下面的代码片段,使用ctypes,由于某些原因导致
内存
泄漏
。本例中的"while True“用于测试调用函数导致的
泄漏
。--因为它一直在循环,
Python
会占用越来越多的
内存
。即使在循环中添加了del test,它仍然会
泄漏
内存
。 你知道这是什么原因造成的吗?编辑:因为有人建议它可能还没有垃圾收集
浏览 2
提问于2011-09-17
得票数 3
1
回答
调优
内存
泄漏
助手
、
、
我正在使用VTune为我的应用程序
内存
泄漏
检测进行
内存
静力学检查。 我的
Python
内存
稳步增长,结果发现有"make_new_set“调用,它们不断地创建
python
竞技场,似乎会导致
内存
泄漏
。
浏览 10
提问于2022-09-23
得票数 0
1
回答
熊猫:这里的记忆漏在哪里?
、
我面临着使用
pandas
库在
python
中
泄漏
内存
的问题。我在类中创建了
pandas
.dataframe对象,我有一个方法,它根据我的条件改变数据的大小。在改变数据大小和创建新的熊猫对象之后,我在我的课堂上重写了原始的
pandas
.dataframe。但是,即使在大幅度减少初始表之后,
内存
使用率仍然很高。一些简短示例的代码(我没有编写流程管理器,请参阅任务管理器):clas
浏览 1
提问于2012-05-15
得票数 11
2
回答
如何仅使用PyArrow.Table结构(最好保持连续
内存
排序)在
Python
中转换PyArrow对象?
、
、
、
、
我想知道是否有一种方法可以转换PyArrow表,而不需要将它们转换成熊猫、数据仓库或
python
对象。str(x) for x in range(M)] print("\nTransposed:\n&quo
浏览 2
提问于2021-06-22
得票数 1
回答已采纳
1
回答
检测
Python
中的
内存
泄漏
、
、
、
、
我有一个
python
模块作为服务运行。有没有办法检测正在运行的进程中的
内存
泄漏
?到目前为止,我在网上看到的大多数工具,比如,要么只是给出所有正在运行的进程的
内存
使用量(我有几个
python
进程),要么要求我将
python
代码作为工具的一部分来运行(我无法这样做,因为我的代码是作为服务运行的您是否知道如何至少捕获
内存
使用情况,或者甚至可以从中检测
内存
泄漏
?
浏览 1
提问于2015-03-23
得票数 2
2
回答
如何在
Python
程序中找到
内存
泄漏
?
、
、
、
可能重复: 我有一个相当复杂的(大约20,000)行
Python
程序,在经过一些开发之后,它在运行时开始消耗越来越多的
内存
。什么是最好的工具和技术来找出所有的
内存
是用来做什么的?通常情况下,这要么是意外地保留对对象的引用,要么是扩展模块错误(由于我们已经使用
Python
2.4安装了一段时间,所以这种情况不太可能)。
浏览 4
提问于2009-02-10
得票数 35
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
小心递归中内存泄漏
Django优化:如何避免内存泄漏
GNOME 3.28.2 发布:修复内存泄漏
Java 内存泄漏了,怎么排查?
Python:Pandas
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
腾讯会议
活动推荐
运营活动
广告
关闭
领券