我在Spyder公司和大型Pandas数据处理公司合作。偶尔，我会意外地单击变量资源管理器窗口中的大型数据文件，Spyder在尝试打开时会挂很长时间。
我发现停止这一过程的唯一方法是完全关闭Spyder，然后重新打开。
是否可以：
取消查看变量的请求而不关闭程序？
设置默认设置，以便Spyder只显示前1000行非常大的对象，如dataframes？
浏览 2提问于2017-10-17得票数 5
下面的代码如何过滤出pandas中的结果？例如，使用以下语句：
df[['name', 'id', 'group']][df.id.notnull()]
我得到了426行(它会过滤掉df.group IS NOT NULL所在的所有行)。但是，如果我只使用语法本身，它会为每一行返回一个bool，{index: bool}：
[df.group.notnull()]
括号表示法如何与pandas配合使用？另一个例子是：
df.id[df.id==458514] # filters out rows
# vs
[df.id==
浏览 0提问于2020-09-03得票数 0
我有一个熊猫数据框架： type(df_s1)
Out[362]: pandas.core.frame.DataFrame 这是它的一行。它是一个系列，而不是一个数据帧。但我希望它是一个数据帧。我该怎么做呢？ type(df_s1.iloc[(j+2), 0:n_s])
Out[363]: pandas.core.series.Series 对于数据帧中的多个行，这不是问题。 type(df_s1.iloc[(j-1):(j+2), 0:n_s])
Out[364]: pandas.core.frame.DataFrame
浏览 7提问于2020-04-22得票数 0
1回答
我正在运行下面的代码，并得到一个错误。我可以运行：
r.at[0,'_foreign_notional_sum'] = s
我做错了什么？
生成代码时出错：
s=0
r['_foreign_notional_sum'] = 0.0
for index,row in r.iterrows():
s=s+r._foreign_notional
index
r.at[index,'_foreign_notional_sum'] = s
--错误：
util.set_value_at文件“pandas_libs\index.pyx”中的&
浏览 3提问于2018-09-04得票数 0
回答已采纳
我正在尝试将DataFrame london中的列london(它是另一个no_eco的副本)替换为只包含contains()方法中的字符串的行。守则如下：
london = no_eco
london.loc[:,'let'] = london.loc[:,'let'].str.contains('E' or 'D' or 'F' or 'G' or 'H' or 'I' or 'J')
london.loc[:,'let'] = l
浏览 0提问于2018-11-07得票数 1
回答已采纳
4回答
我想用Python分割我的数据。切片数据的基本任务会给我带来意想不到的错误。
我的代码是：
import pandas as pd
test_file = pd.read_csv("C:/Users/Lenovo/Desktop/testfile.csv")
test_select = test_file[["Category", "Shop"]]
print(test_select[1,1])
代码print(test_select[1,1])应该显示第二列的第二行。
错误信息：
pandas._libs.hashtable.PyObjec
浏览 0提问于2018-12-15得票数 1
回答已采纳
我需要在CSV输入文件中查找具有循环引用的行，如下所示：
start,end,weather
california,arizona,hot
colorado,kansas,cold
arizona,california,hot
上面应该检测到第一行和第三行是一个循环引用。我目前正在将csv加载到数据库中，并运行自连接查询，以确定数据是否具有循环引用。但是看看是否有任何方法可以使用Python Pandas来处理这个问题。
谢谢!
浏览 3提问于2018-08-13得票数 1
回答已采纳
1回答
我有一只熊猫，上面有一列当地社区的资料。我想做的是浏览这个专栏，比较每个邻居，希望能够序列化数据。当我在python shell中使用一小部分数据时，它工作得很好：
n = pd.DataFrame({'neighborhood':['Dupont Circle', 'Adams Morgan', 'alexandria', 'west end/dupont circle', 'logan circle', 'alexandria, va', 'washington'
浏览 5提问于2020-06-15得票数 1
1回答
如何使用Pandas模块将项目列表[1,2,3,4,5]写入excel文件中的特定选项卡中，从特定的行和列位置开始？是否涉及pandas.DataFrame.to_excel函数?在将list写入excel文件之前，是否需要将其转换为dataframe？
我是否要先将列表转换为序列，然后将序列转换为数据帧，然后将数据帧写入excel文件？
浏览 24提问于2016-08-04得票数 0
2回答
我有一个不美观和可搜索的文件，所以我以csv格式下载了它。它包含4列和116424行。我无法将它的三列，即年份、年龄和比率绘制成一个热图。csv文件的链接是：
import numpy as np
import pandas as pd
from pandas import DataFrame
from numpy.random import randn
from scipy import stats
import matplotlib.pyplot as plt
import seaborn as sns
df = pd.read_csv('new_file.csv')
p
浏览 0提问于2018-08-21得票数 0
我在尝试将pandas数据帧从CSV写入SQLITE数据库时遇到内存错误。CSV文件有430 MB和6,000,000行。
对于较小的文件，它完全可以正常工作。然而，我想知道如何避免较大文件的内存错误。
按块读取工作正常，并正确地打印了20000行块中的6000000行。但是，该脚本希望将全部6,000,000行代码转移到SQLITE database+table中，并给出以下错误：
Traceback (most recent call last):
File "C:/SQLITELOAD1.py", line 42, in <module>
.ren
浏览 0提问于2020-03-06得票数 2
我循环遍历pandas df的行，循环索引i。我可以使用ix函数分配几列，其中循环索引作为第一个参数，列名作为第二个参数。但是，当我尝试使用此方法检索/打印时，
print(df.ix[i,"Run"])
我得到一个下面的Typerror: str对象不能解释为整数。在某种程度上与Keyerror有关：“Run”
我不太确定为什么会发生这种情况，因为Run确实是数据帧中的一列。有什么建议吗？
Traceback (most recent call last):
File \!"C:\WPy-3670\python-3.6.7.amd64\lib\site-packa
浏览 0提问于2019-07-27得票数 2
我已经将问题缩小到以下代码：
import pandas as pd
d = {'b' : 1, 'a' : 0, 'c' : 2}
c = {'one':[1,2,3], 'two':[4,5,6]}
p = pd.Series(d)
pc = pd.DataFrame(c)
print(p[-1]) # This line works
print(pc['two'][-1]) # This line does not work.
追溯(最近一次调用)：文件"jdoodle.py"
浏览 0提问于2019-01-21得票数 2
2回答
我需要通过datetime列和另一个str(object)列来转换一个dataframe，以便按组应用函数，并将结果分配给组的每个行成员。我理解，但不能同时为这两个条件创建一个pandas.Grouper。因此：
如何在多列上使用pandas.Grouper？
浏览 6提问于2018-09-05得票数 16
回答已采纳
我有这段代码，我不知道如何检索我想要的行。
我正在尝试检索具有device_id=16384035的行。我尝试了浮点数和整数，并在那里进行了字符串(因为它告诉我列是对象)，但都没有工作。
print(s_devices['Device ID'])
print(s_devices.columns)
print(s_devices.iloc[0,1])
print(type(s_devices.iloc[0,1]))
print(s_devices[['Device ID']==float(16384035)])
以上打印如下：
0 16384035.0
浏览 4提问于2022-02-12得票数 -1
回答已采纳
sktime库需要一个非常“特殊”的data format。对于n个时间序列，每个序列的T值需要存储在长度为T的pandas序列的pandas Dataframe中，如下所示： DataFrame： index | Data
0 | pd.Series
1 | pd.Series
... | ...
n-1 | pd.Series 我试图通过读取另一个数据帧来填充循环中n=2和T=3的空数据帧，但没有成功。下面是我的简化版本，在每一行中使用一个常量pd.Series： import pandas as pd
df = pd.DataFrame(
浏览 14提问于2020-06-17得票数 1
回答已采纳
1回答
我试图根据日期列(根据索引计算)进行切片，而只根据它旁边的开始日期进行累积求和。
下面是要复制/运行的小示例代码：
import numpy
import pandas
data = pandas.DataFrame(
{"Bought" : [1,3,4,6]}, index=pandas.to_datetime(['01-01-2020','02-01-2020','03-01-2020','04-01-2020']))
data['StartDate'] = data.index
data[&
浏览 4提问于2022-11-22得票数 0
我正在尝试解析.dta文件，并将每一行输入到单独的表中。.dta文件由许多不同的变量组成，我想将每个变量插入到一个单独的“变量表”中。我使用的是pandas的新.dta阅读器，名为statareader。我没有很多使用python的经验，我希望在我的语法方面能得到一些帮助。我也在使用python 2.7.5
a = 2
t = 1
while t >= 1:
for date, row in dr.iterrows():
cur.execute("INSERT INTO (table#'+str(t)') (data) VALUES(%s)
浏览 1提问于2013-07-02得票数 0
回答已采纳
这是我正在犯的错误：
Traceback (most recent call last):
File "reader.py", line 5, in <module>
import pandas as pd
File "/usr/local/lib/python3.7/site-packages/pandas/__init__.py", line 55, in <module>
from pandas.core.api import (
File "/usr/local/lib/python3.7/si
浏览 6提问于2020-02-11得票数 3
我在Python和Spyder中有一个非常简单的错误：
import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
ds=pd.read_csv(".\verikumesi\NBA_player_of_the_week.csv")
当我运行上面的代码时，我得到一个错误：
文件"C:/Users/Acer/Desktop/MASAÜSTÜ/github/deneme.py"，第12行ds=pd.read_csv(".\verikumesi\NBA_player_of_
浏览 2提问于2018-11-27得票数 3
回答已采纳
任何人都可以帮助解决这个错误吗？
import pandas as pd
data = pd.read_csv('test', dtype=str)
data.head()
data = data[pd.notnull(data['Sequence'])]
数据如下所示。我想删除包含非数字‘序列’值的行
Timestamp Sequence Others
0 21:04:20.589 1 TS
1 21:04:20.589 Rx NaN
2 21:04:20.611 2 TS
3 21:04:20.61
浏览 29提问于2019-08-01得票数 1
请参阅以下数据。
import pandas as pd
data = [['PMO', 10], ['LOL', 15], ['juli', 14], ['PMO', 10], ['LOL',
15], ['juli', 14]]
df = pd.DataFrame(data, columns=['Name', 'Age'])
print(df)
我想迭代这个说明性数据，并复制/乘行，以便如果一行包含或匹配PMO，则行在下面被复制。如果是的话，这是可能的吗？
亲
浏览 5提问于2022-10-25得票数 2
回答已采纳
我有一个叫做text.txt的数据。下面还有我的代码。我想要提取行值，并希望从中生成一个表。我还想看看是否有更好的方法来做到这一点。谢谢
test.txt
Counting********************File: bbduk_trimmed_Ago2_SsHV2L_1_CATGGC_L003_R1_001
Seq_132582_1: ATCCGAATTAGTGTAGGGGTTAACATAACTCT:
0
Seq_483974_49238: TCCGAATTAGTGTAGGGGTTAACATAACTC:
73764
Counting********************File
浏览 0提问于2018-10-31得票数 1
回答已采纳
3回答
有没有办法对pandas text dataframe列执行类似于的操作，使其返回可用于索引数据帧的索引列表或布尔值列表？例如，我希望能够匹配列以'prefix_‘开头的所有行，类似于SQL中的WHERE <col> LIKE prefix_%。
浏览 3提问于2014-03-10得票数 35
回答已采纳
1回答
我一直在尝试使用pandas groupby分析数据，然后我在将pandas从0.15.0版本更新到0.18.1版本后遇到了以前不存在的问题。
我想计算‘相等’的值为1(它只能接受0或1的值)的保守期的数量。我在lambda函数中定义了以下内容，并按如下方式使用groupby命令：
import pandas as pd
E = lambda x: np.sum(x.diff()==1) + x.head(1)
grouped = df.groupby(['run_'])
agg_data = grouped[['equality
浏览 1提问于2016-05-17得票数 0
我希望在重置发生时向前填充我的水表读数数据，以便数据干净可供分析。重置是指下一行中的值小于前一行的值。
我的python pandas数据帧如下所示：
water
0 31031
1 31037
2 31038
3 31043
4 131 (system was reset)
5 223
6 331
7 412
...
有可能在我的熊猫数据框中有几次水数据的重置。
研究表明，对于pandas数据帧，使用for循环/迭代不是最好的选择，所以我尽量避免。
我想要更新dataframe df，以便系统在索引4处重
浏览 1提问于2019-09-24得票数 1
1回答
我在pd.cut ()中分离出了一些行为，我不理解它的失败模式。这似乎与索引有关:由于该系列中默认的RangeIndex都按预期运行；当索引为“0‘code”时，代码将与KeyError: 1 (在问题的底部跟踪)崩溃。
我想了解为什么在这种情况下，ids[x == bins[0]] = 1行会与KeyError: 1崩溃。
对失败的一种简短的、独立的再现：
import numpy as np
import pandas as pd
ids = np.array([3, 3, 4, 4, 4, 4, 4, 4, 4, 4, 4, 4, 4, 4, 5, 4, 4, 4, 4, 4, 5,
浏览 2提问于2022-02-08得票数 0
我希望为Pandas Dataframe选择特定行(例如第一行)中具有特定值(例如1)的列
浏览 2提问于2018-11-08得票数 4
回答已采纳
我有一个FASTA文件，可以很容易地被解析。
我对提取序列ID和序列长度感兴趣。我用这些行来做这件事，但我觉得太重了(两次迭代，转换等等)
from Bio import SeqIO
import pandas as pd
# parse sequence fasta file
identifiers = [seq_record.id for seq_record in SeqIO.parse("sequence.fasta",
"fasta"
浏览 2提问于2013-10-17得票数 8
回答已采纳
我想知道使用Scipy来适应Pandas DataFrame列的最佳方式。如果我有一个包含列(A，B，C，D和Z_real)的数据表(Pandas DataFrame)，其中Z依赖于A，B，C和D，我想要拟合每个系列行( DataFrame )的一个函数，该函数对Z (Z_pred)进行预测。
要拟合的每个函数的签名是
func(series, param_1, param_2...)
其中，series是与DataFrame的每一行对应的Pandas Series。我使用Pandas Series，以便不同的函数可以使用不同的列组合。
我尝试使用以下命令将DataFrame传递给scipy.
浏览 0提问于2016-02-06得票数 2
回答已采纳
我有一个Pandas DataFrame，它有两列，其中包含范围[-pi，pi)中的一些角度。我需要计算每一行的瞬时角速度，这可以使用diff()来完成，但是当我的数据跨越从pi到-pi的不连续时，这种简单的方法就失败了，例如 我正在尝试对我的列使用numpy.unwrap()，但是当我尝试下面的代码时，我得到了一个ValueError。 angle_data["theta"].apply(np.unwrap)
<Traceback message>
ValueError: diff requires input that is at least one dim
浏览 74提问于2020-12-08得票数 1
回答已采纳
我想遍历pandas DataFrame中的每一行，并对每一行中的元素做一些处理。
现在我有
for row in df.iterrows():
if row['col'] > 1.5:
doSomething
但它告诉我‘元组索引必须是整数，而不是str’。如何访问某一行中我想要的列？
浏览 0提问于2014-10-08得票数 7
我有一个奇怪的Pandas问题，当我使用来自数据框的值使用apply函数时，它只应用于第一行： import pandas as pd
# main data frame - to be edited
headerData = [['dataA', 'dataB']]
valuesData = [[10, 20], [10, 20]]
dfData = pd.DataFrame(valuesData, columns = headerData)
dfData.to_csv('MainData.csv', index=False)
read
浏览 13提问于2021-04-14得票数 1
回答已采纳
我以前看过这个帖子，但我找不到。
我有几个数据库，它们的描述行分布在最多三条记录上。我想在access中执行一个查询，将记录放在一行上。例如。
Source data:
Location staff Date Time Description
012 12 2014-07-18 0800 Line1 of desc
012 12 2014-07-18 0800 Line2 of desc
012
浏览 1提问于2014-07-19得票数 0
2回答
所以我正在编写一个类似于猜谜游戏的代码。猜谜游戏的数据在CSV文件中，所以我决定使用pandas。我尝试使用pandas导入我的csv文件，选择一个随机行并将数据放入变量中，这样我就可以在其余代码中使用它，但是，我不知道如何正确地格式化变量中的数据。 我试着用split()来分割字符串，但是我完全迷失了方向。 ar = pandas.read_csv('names.csv')
ar.columns = ["Song Name","Artist","Intials"]
randomsong = ar.sample(1)
s
浏览 11提问于2019-09-26得票数 1
2回答
如何断言特定的Pandas行/列值为nan？我尝试从iloc Numpy值和将DataFrame数组转换为DataFrame数组中断言一个值。似乎我可以将值作为np.nan输入，但我不能测试单个值。 import pandas as pd
import numpy as np
df= pd.DataFrame([
dict(id=1, color='red'),
dict(id=2, color='blue'),
dict(id=3, color=np.nan),
])
assert df.iloc[0, 1] == 're
浏览 32提问于2020-09-09得票数 1
回答已采纳
1回答
我正在处理一些玻璃钻孔温度数据，该数据由大约1000行乘700列组成。垂直索引是深度(即，当您向下移动时，数组深度增加)，列标题是日期时间值(即，当您沿着数组向右移动时，您将在时间上向前移动)。 我正在寻找一种方法来平均列中的所有温度取决于日期采样率。例如，较早的日期时间间隔为10分钟，而较晚的日期时间间隔为6小时。 如果能够将采样作为输入，并基于该采样率提取数据，这将是一件好事，这样我就可以看到哪一个效果最好。 如果我选择比方说3小时采样，如果间隔超过3小时，这将被忽略，并且在这种情况下不会对数据进行任何更改(即，10分钟的日期时间间隔是平均的，但6小时的日期时间间隔不受影响)。 所有这些
浏览 13提问于2019-10-14得票数 0
我正在导入的CSV文件有一个名为'MED EXP DATE‘的列。我在前面的代码中引用了相同的列，没有任何问题。当我稍后引用它时，我得到一个键错误。 import pandas as pd
df = pd.read_csv(r"C:\Users\Desktop\Air_Rally_Marketing\PILOT_BASIC.csv", low_memory=False, dtype={'UNIQUE ID': str, 'FIRST NAME': str,'LAST NAME': str, 'STREET 1&#
浏览 21提问于2020-04-27得票数 0
回答已采纳
如何返回一个元组列表，其中每个元组都包含来自Pandas DF的NaN值所在行的值？ 我看到了使用以下代码的建议： [odfscsv_df.iloc[i, j] for i, j in zip(*np.where(pd.isnull(odfscsv_df)))] 但这只显示了NaN值。我想返回具有此NaN值的整个行
浏览 19提问于2020-07-01得票数 0
2回答
假设我有一个熊猫系列，如下所示：
import pandas as pd
pd.Series([1, 0, 0, 1, 0, 0, 0], name='series')
如何添加从最后一个>0数字开始具有行计数的列，如下所示：
pd.DataFrame({
'series': [1, 0, 0, 1, 0, 0, 0],
'row_num': [0, 1, 2, 0, 1, 2, 3]
})
浏览 0提问于2019-07-09得票数 5
2回答
我正在尝试对棒球场地的F/x数据进行一些分析。所有的俯仰数据都存储在一个pandas数据帧中，其中包含像“俯仰速度”和“X位置”这样的列。我有一个包装器函数(使用pandas.query)，对于给定的音高，它将找到具有类似速度和位置的其他音高。此函数返回未知大小的pandas数据帧。我想在大量的投球上使用这个函数；例如，查找与在一场比赛中投出的投球相似的所有投球。我有一个函数可以正确地做到这一点，但它相当慢(可能是因为它不断地调整resampled_pitches的大小)：
def get_pitches_from_templates(template_pitches, all_pitches
浏览 1提问于2015-03-07得票数 0
1回答
我将数据聚合到一个CVS文件中，代码如下：
import pandas
df = pandas.read_csv("./input.csv", delimiter=";", low_memory=False)
df.head()
count_severity = df.groupby("PHONE")["IMEI"].unique()
has_multiple_elements = count_severity.apply(lambda x: len(x)>1)
result = count_severity[has_mul
浏览 1提问于2022-02-20得票数 0
回答已采纳
1回答
对于df
id Date ITEM_ID TYPE GROUP
0 13710750 2019-07-01 SLM607 O X
1 13710760 2019-07-01 SLM607 O M
2 13710770 2019-07-03 SLM607 O I
3 13710780 2019-09-03 SLM607 O N
4 13667449 2019-08-02 887643 O I
5 13667450
浏览 1提问于2020-09-08得票数 0
回答已采纳
1回答
我有一个Postgres数据库和下面的示例表。 ? 我有一个函数，它运行一段时间，每次运行时，使用query选择一些行，并将其发送到Azure服务总线。我想在查询中定义一个变量，并保存最后一个值，比如"id“。下次运行时，从最后一个值中选择数据。 例如： 第一次运行:选择id为"1“和"2”的行 第二次运行:选择id为"3“和"4”的行 我的代码是： import os
import psycopg2
import pandas as pd
from azure.servicebus import ServiceBusClient, Servi
浏览 27提问于2021-04-25得票数 0
回答已采纳
我用Python编写了以下代码。它从woocommerce的API获取json数据，然后生成我想要的csv文件，这样我就可以实现自动化。我的问题是，我得到的csv文件在同一行中的一列下有为订单购买的所有商品。我想要的是有1行为每个项目与所有其他列保持相同的每个订单。
import requests
from woocommerce import API
import pandas as pd
import json
import pandas
import csv
from pandas.io.json import json_normalize
import flatten_json
浏览 3提问于2021-02-19得票数 0
1回答
我有下面的代码
import pandas as pd
df = pd.DataFrame({"A":[12, 4, 5, None, 1],
"B":[7, 2, 54, 3, None],
"C":[20, 16, 11, 3, 8],
"D":[14, 3, None, 2, 6]})
df
df[df['A'].notna()]
最后一行删除整个df行( A为None )。
然而，为了提高可读性
浏览 2提问于2022-04-04得票数 1
回答已采纳
我也见过类似的问题，但没有解决这个问题的办法。
我正在使用Google Colab：
!pip install pycaret
这是：
import time
import numpy as np
import pandas as pd
from pycaret.datasets import get_data
#from pycaret.time_series import TSForecastingExperiment
from pycaret.time_series import *
最后一行返回错误: ModuleNotFoundError:没有名为“pycaret.time_se
浏览 26提问于2022-08-23得票数 0
回答已采纳
3回答
如果假在熊猫中，则为布尔值系列
、、、、
我刚接触过python，我发现我的很多问题都已经得到了解答。在7年的各种语言编码中，我从来没有在这里发布过一个问题，所以这次我真的很困惑。
我在用python 3.6
我有一只熊猫数据，它的列就是布尔值。我有一些代码，只有当本列中的所有行都是True时，才执行这些代码。
在我的代码的其他地方，我使用了：
if True not in df.column:
要识别df中的一个行(如果不是一个行)，则为True。这个很好用。
但是，由于某种原因，逆流不起作用：
if False not in df.column:
标识df中的所有行是否为True。
即使这样也会返回False：
import pa
浏览 0提问于2018-01-21得票数 0
回答已采纳
1回答
你好，在处理LSTM时，我似乎找不出X，Y与批处理输入形状Keras之间的关系。
目前的数据库是一个84119,190熊猫数据，我正在引进。从那里爆发到X和Y。所以特征是189。如果你能指出我错在哪里，因为它与(顺序，时间步骤，维度)有关，我们将不胜感激。
import numpy as np
import pandas as pd
from keras.models import Sequential
from keras.layers import LSTM
# load dataset
training_data_df = pd.read_csv("C:/Users/#
浏览 2提问于2017-11-08得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
