2回答
我有一段代码需要从一个数据帧中获取值，然后将其应用到另一个数据帧中。例如，假设1个数据帧是学生数据帧的分数，第二个数据帧是学生数据帧的组合。我想要遍历每个combination_DF，获得学生的分数，然后将其相加。combination_DF，找到每个名字的分数，并添加一个列，该列将包含每个组合的</e
浏览 0提问于2018-01-08得票数 0
回答已采纳
我有两个数据帧，一个包含屏幕名称/显示名称，另一个包含个人，我正在尝试创建第三个数据帧，每次屏幕名称/显示名称中出现姓氏时，在新行中包含来自每个数据帧的所有数据。从功能上讲，这将创建一个可能匹配的名称列表。我当前的代码运行得很好，但运行速度非常慢，如下所示：# cols = 'userid','
浏览 0提问于2016-04-11得票数 1
1回答
我要将CSV文件中的数据插入到Azure上托管的SQL Server数据库中。我能够在表中插入数据，方法是将数据读取到pandas数据帧中，并在python中的for循环中使用insert语句。这种方法需要很长时间才能插入数据。我也尝试过pd.to_sql()。虽然后者比for循环方法更快，但它仍然很慢。有没有更快</e
浏览 0提问于2019-10-14得票数 0
当我用熊猫清理大数据的时候，我有两种方法:一种是从pyspark 2.3+清洁数据中使用sdf，另一种是通过toPandas()将sdf转换成pdf，然后使用熊猫进行清洁。我搞不懂这些方法有什么不同？
我希望帮手能从分布、速度和其他方面来解释。
浏览 1提问于2019-01-21得票数 1
回答已采纳
有没有比像这样遍历数据框更快的清空pandas数据框列的方法(其中A、B和C是列名)： while x < Framelength dg.iloc[x,B] = 0 x+=1 我可以将整个数据帧清零，如果这样会更快的话
浏览 48提问于2020-08-19得票数 5
我尝试使用以下代码(我在Tensorflow教程here中找到)来读取CSV文件中的数据： def get_dataset(file_path, **kwargs):
dataset = tf.data.experimental.make_csv_dataset然而，在我的CSV文件中，我有多列作为标签(我有1008个特征和2列作为标签)。我想知道如何使用这个make_csv_dataset读取我的数据。 谢谢!
浏览 55提问于2020-03-17得票数 2
我有两个pandas数据帧，每个都有相同的索引和列。我想创建第三个pandas数据帧，其中包含其他两个细胞的乘积。 这是我目前的解决方案，但它太慢了。import pandas as pd
bar = df2.
浏览 10提问于2019-05-11得票数 1
回答已采纳
3回答
我将一个包含150,000行的csv文件读入到pandas数据帧中。此数据帧有一个日期为yyyy-mm-dd格式的字段Date。我想从其中提取月份、日期和年份，并分别复制到数据帧的列Month、Day和Year中。对于几百条记录，以下两种方法可以正常工作，但是对于150,000条记录，这两种方法都需要花费非常长的时间来执行。对于100,000+记录，有没有
浏览 0提问于2014-02-22得票数 22
回答已采纳
我读过，使用query()进行数据帧过滤要比仅使用带'&‘的条件来过滤数据更快。当然，当可以使用query()时，也有一些限制。BUt我在一个数据帧上尝试了它，实际上运行速度要慢得多。为什么会这样呢？如下所示：
#create dataframe with 5 columns using random numbersdev.共7次运行，每次1000次循环
浏览 1提问于2019-05-04得票数 4
我基本上是每5秒从PostgreSQL导入一个表，并将其刷新到一个数据帧中，除了列之外，每次的数据帧都是不同的。现在，我只是通过删除旧的数据帧，然后使用pandasGUI中的函数"store.add_dataframe“和"store.remove_dataframe”添加一个新的数据帧来实现这一点。此方法有效，但它花费<em
浏览 0提问于2021-02-18得票数 0
我已经用Python将一个简单的查询日志导入到一个pandas数据帧中(见下图)，我想知道最有效的方法是提取包含任何给定关键字的所有行，这些关键字包含在' keyword‘列中。我可以迭代数据帧--但我有一种感觉，使用数组/掩码可能会更快。
浏览 1提问于2013-05-23得票数 1
回答已采纳
我有一个有数百万行的数据集。我需要一种更快的方法来创建以下格式的数据帧： column_1 column_2 Yes Go to SchoolYes Go to School
No Play video games for hours 有没有更快的
浏览 36提问于2020-12-28得票数 0
2回答
我正在读取包含大量数据的hdf5文件。我想将其存储在一个数据帧中(它将包含大约1.3e9行)。数据帧的创建速度会慢得多，这是预期的吗？有什么方法可以加速这个过程吗？
浏览 0提问于2021-03-03得票数 0
1回答
我知道在numpy数组上工作会比pandas更快。在下面的示例中，我创建了一个数据帧和一个字典。字典包含列的名称及其对应的映射。我想知道有没有什么函数可以让我把一个二进制数组提供给一个numpy数组来进行映射，并产生更快的处理时间？import pandas</em
浏览 2提问于2021-05-24得票数 1
我使用的是Pandas/Dask数据帧。我有一个大约8700万行的数据帧。我有两列(称为列A和列B)，实际上我想说‘如果'x’不在列A的一行中，则将'n‘添加到值中。’当然，我可以尝试使用itertuple，但我只是想知道是否有更快的方法来检查是否有值，如果没有，则为8700万条记录添加其他内容。
浏览 11提问于2020-04-20得票数 0
1回答
我正在尝试读取以下数据集，并将其转换为pandas数据帧：
{'event_info': '...', 'event_timestamp': '...我一直在尝试以下方法，但它花费的时间太长(+60分钟)：import pandas as pdimport
浏览 0提问于2020-11-10得票数 3
我试图在另一个数据框架的基础上构建一个数据框架。为了构建第二个数据帧，我需要循环第一个数据帧，对数据进行一些更改，并将其插入到第二个数据帧中。我为我的for循环使用了一个namedTuple。这个循环花费了大量的时间来处理2m行数据。有什么最快的方法可以做到这一点吗？
浏览 39提问于2020-04-30得票数 0
回答已采纳
3回答
我有熊猫DataFrame，它看起来像这样： Name Number Description
Description: red""" 我是一个初学者，我真的不知道我该怎么做？稍后，我可能需要将此应用于一些类似的DataFrames。
浏览 13提问于2019-04-07得票数 5
回答已采纳
我有一个非常大的Pandas数据帧，我想把它保存到磁盘上，以便以后使用。数据帧仅包含字符串数据。然而，无论我使用哪种格式，保存过程都会导致我的Google Colab环境崩溃，因为除了CSV之外，所有可用的RAM都会用完，CSV甚至在5小时后都不会完成。我尝试过to_json、to_feather、to_parq
浏览 2提问于2019-05-29得票数 2
在python中，我有一个包含2列实数的数据帧。我希望生成复数，并使用这两列作为我的新数据集的实部和虚部。
浏览 88提问于2018-06-25得票数 3
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
