Cumulatin新专栏？python pandas中的窗口函数？
Cumulatin新专栏是一个关于云计算领域的专栏，旨在提供关于云计算的深入理解和实践经验。该专栏涵盖了前端开发、后端开发、软件测试、数据库、服务器运维、云原生、网络通信、网络安全、音视频、多媒体处理、人工智能、物联网、移动开发、存储、区块链、元宇宙等专业知识。
Python pandas中的窗口函数是一种数据处理技术，用于对时间序列数据进行滑动窗口操作。窗口函数可以对数据进行聚合、转换和计算，常用于数据分析和特征工程。
窗口函数可以按照时间或索引进行滑动，并且可以应用于各种统计计算，如求和、均值、最大值、最小值等。它可以帮助我们在时间序列数据中提取有用的信息和特征。
在Python pandas中，窗口函数可以通过rolling()方法来实现。该方法可以指定窗口的大小和滑动的步长，并且可以与其他函数（如sum()、mean()、max()、min()等）结合使用，实现不同的计算需求。
以下是一些常见的窗口函数的应用场景和腾讯云相关产品推荐：
- 移动平均值（Moving Average）：用于平滑时间序列数据，去除噪音和异常值。推荐腾讯云产品：云数据库 TencentDB，产品介绍链接：https://cloud.tencent.com/product/cdb
- 滑动窗口统计（Rolling Window Statistics）：用于计算滑动窗口内的统计指标，如窗口内的最大值、最小值、均值等。推荐腾讯云产品：云原生数据库 TDSQL-C，产品介绍链接：https://cloud.tencent.com/product/tdsqlc
- 时间序列预测（Time Series Forecasting）：利用窗口函数和机器学习算法，对时间序列数据进行预测和模型训练。推荐腾讯云产品：人工智能机器学习平台 AI Lab，产品介绍链接：https://cloud.tencent.com/product/ailab
总结：窗口函数是Python pandas中用于处理时间序列数据的一种强大工具，可以应用于各种数据分析和特征工程任务。腾讯云提供了多个相关产品，可帮助开发者在云计算环境中高效处理和分析大规模的时间序列数据。
相关·内容
我是来自R背景的新手Python，我在pandas中有以下时间专栏
time
09:12:23
09:34:33
10:23:22
11:23:33
我想把它转换成pandas的time对象，我正在用python做下面的事情
df['time'] = pd.to_datetime(df['time']).dt.time
为什么会显示下面的错误。
class datetime.time is not convertible to datetime
浏览 0提问于2018-09-19得票数 4
1回答
我在Pandas中有一个名为“Campaign”的专栏，它的值如下所示：
英国-样车租赁-汽车-宽-MatchPost“
我需要能够拉出字符串包含‘汽车租赁’，并设置另一个产品列为‘汽车’。连字符并不总是将单词Car分开，所以用这种方式找到字符串是不可能的。
如何在Pandas/Python中实现这一点？
浏览 3提问于2015-06-04得票数 2
回答已采纳
我正在使用Python pandas to read_excel。这就是我正在阅读的专栏。
我的问题是read_excel没有将空单元格计算为单元格。当我使用df2=df1.iloc[0:30]时，我希望它包含那些空单元格，这样最后两个数据项就不会包含在我的数据框中(这是因为这些单元格在整个月中每天都被填充，所以这些空单元格将一直存在到这个月的最后一天)。如何确保pandas read_excel在其数据帧中包含这些空单元格？
浏览 1提问于2017-11-30得票数 1
我有这样的数据 ? 我想添加一个新的专栏，如下所示 ? 那么最终的数据将如下所示 ? 我如何在python pandas中做到这一点？寻求您的支持
浏览 25提问于2021-03-19得票数 1
回答已采纳
在Pandas中，可以使用以下方法对所有列的表(平均值、分位数、计数和计数)进行概述：pandas.DataFrame.describe。
下面是一个示例：
是否有一种方法在BigQuery SQL，动态中生成这样的表？桌子。我有几十个，如果不是上百个专栏，我不能一个一个地写。
浏览 4提问于2022-04-07得票数 -1
我正试图在蟒蛇熊猫中创建一个新的专栏，我一直得到一个(不稳定的)重新出现的KeyError。脚本的部分非常简单，所以我不确定是什么导致了错误，因为dataset中没有一个列具有相同的名称。
我的目标是创建一个新列，并将其附加到包含ticket_contents列内容的新翻译的dataframe中。这是一个样本的数据；
25483 0 outstanding 0 Los-Angeles e-payment delayed Ticket 1/7/19 7:54
39363 0 outstanding 0 Los-Angeles e-payment delayed
浏览 0提问于2019-02-26得票数 0
回答已采纳
我正在做一个Python的Dataframe练习，下面是一个专栏的类型：
pandas.core.series.Series
我已经查看了有关Dataframe结构的资源，但找不到这种类型的解释，也找不到"Series“与"series”的区别。
谁能给我解释一下“核心”、“系列”和“系列”是什么意思？为什么类型有这三个组成部分？
谢谢
浏览 178提问于2017-02-21得票数 1
我有一个名为DataFrame的maximoVerano，并且希望重新索引它，因为我将用不同的年份索引追加其他DataFrames。但是，当我想使用set-index时，正如您在示例中看到的那样，我得到了错误代码：
KeyError：“2001年没有人在专栏里”
样本代码
>>> maximosVerano
demanda demanda31.5 ... fechaHoraMaxDem31.5 fechaHoraMaxDem63
0 28.037 4.1211 ... 2001-03-16 21:00:00 2001-01-15 22:
浏览 3提问于2021-07-29得票数 1
回答已采纳
1回答
我正在使用pandas rolling-function生成顺序数据。我的主窗口大小是51，我需要用不同的窗口从这个初始窗口计算各种度量，例如:虚拟数据：
df = pd.DataFrame(np.random.randint(0,800,size=(1000, 3)), columns=list('ABC'))
我的函数：
def test(data):
meanMov = np.zeros((51,3))
mean = np.mean(data[0:31,:],axis=0)
for i in range(0,16):
mea
浏览 3提问于2018-01-29得票数 0
1回答
我在使用简单的自建函数基于pandas滚动窗口进行数据处理时遇到了一些问题。我有三个带有值的列，并希望使用一个简单的列表理解来计算其中的一列，以便进一步处理。在我的示例中，我只是简单地对这些值进行求和，这将为每个窗口生成一个值。但是看起来列表理解失败了.import pandas as pd import numpy as np from collections import Counter as count
df = pd.DataFrame(np.random.randint(0,100,size=(50, 3)), columns=list('ABC'))
def my_
浏览 9提问于2018-01-31得票数 0
我有一个如下所示的数据框架--我想测试列Number是否在每个行记录的列List of Numbers中。 ? 最终，我希望得到如下所示的Result专栏： ? 在Python Pandas中有没有更好的方法来获得预期的结果？谢谢!
浏览 8提问于2020-04-23得票数 1
回答已采纳
KeyError帖子上的任何一种解决方案都没有解决我的问题，因此这个问题：
我在Pandas DataFrame中有以下列：
df['EventDate']
0 26-12-2016
1 23-12-2016
2 16-12-2016
3 15-12-2016
4 11-12-2016
5 10-12-2016
6 07-12-2016
现在，我尝试使用以下命令将日期分割并将一年中的最后四个值提取到另一个系列中：
trial=df["EventDate"].str
浏览 1提问于2017-08-28得票数 2
回答已采纳
4回答
在csv文件中，有一个名为"no_pun“的列。里面有一些标记词。我想得到这个列中每个元素的长度。这在python中很容易实现。但我有个错误。
我的代码：
for i in range(0,len(data['no_pun'])):
data["len_desc"][i] = len(data["no_pun"][i])
KeyError：
KeyError Traceback (most recent call last)
/anaconda3/lib/python3.6/site-packages/pandas/core
浏览 0提问于2019-04-07得票数 2
我是python的新手，我在for循环中创建了pandas系列。每次我都想把这个数列画成一个图形。我使用的是ax = series.plot(title = str(i)+'.jpg')，但是所有的图形都在同一个窗口中绘制。如何在不同的窗口中绘制它们？
浏览 18提问于2021-05-25得票数 0
我有一个地理位置在里面的数据框。位置是字符串。这是我的函数，用于删除字符串并通过Degress.Decimal获取位置。 示例位置23º30.0'N latitud.decimal <- function(y) {
latregex <- str_match(y,"(\\d+)º\\s(\\d*.\\d*).(.)")
latitud <- (as.numeric(latregex[1,2])) +((as.numeric(latregex[1,3])) / 60)
if (latregex[1,4]=="S") {
浏览 18提问于2019-02-21得票数 2
回答已采纳
1回答
我正在根据收到的电子邮件用Python进行文本分析。我的数据在Pandas中，电子邮件文本在df['document']中，主题在df['topic']专栏中。
我想要创建一个包含定义每个主题(可能使用tf_idf)的顶部关键字的dataframe。
我创建了一个矢量器，并试图创建一个新的数据格式，主题作为索引或行，以及列中的单词列表。
from sklearn.feature_extraction.text import TfidfVectorizer
v = TfidfVectorizer()
x = v.fit_transform(df['docu
浏览 0提问于2019-06-19得票数 0
我有一个文件，看起来像
# Comment 1
# Comment 2
# A B C
1 2 3
4 5 6
7 8 9
如何用python pandas模块读取它，使最后一行注释可以被解释为专栏标题？
我试过了
pandas.read_table(file_path, header= 2 , comment='#' )
但注释行首先被删除，因此标题行将为7 8 9
浏览 0提问于2016-04-21得票数 2
3回答
我有以下数据集：
import pandas as pd
dataset = { 'name': ['Clovis', 'Priscila', 'Raul', 'Alice'], 'age': [28, 35, 4, 11] }
family = pd.DataFrame(dataset)
我需要一个新的专栏文章：“克洛维斯28岁了”，但很明显，每一行都是如此。
我尝试使用.eval()和.assign()，但没有得到预期的结果
浏览 8提问于2022-05-17得票数 0
我有一个pandas数据帧，其中一列是图像( numpy数组格式的单通道uint8 2d图像)。我使用iterrows()遍历各行，并处理图像，我希望将结果(其他图像，格式相同)传递给dataframe的其他列的元素。我有一个关于图片的专栏。 for index,row in df.iterrows():
image=df['image']
processed=process_image(image)
df.loc[index,'processed_image']=processed 但是，当我尝试使用.loc或.at (或.iloc，
浏览 11提问于2020-12-22得票数 0
1回答
我正在使用Visual代码在Windows 10机器上使用Python3.9.7创建一个AWS应用程序。我正在使用Visual代码中的AWS工具包和Python扩展。
在运行/调试Lambda SAM应用程序时，Visual代码输出窗口和调试控制台都会将错误消息和堆栈跟踪显示为带有\n字符的未格式化字典，而不是添加到输出中的实际新行。典型的错误/堆栈跟踪非常不可读，看起来如下所示，但是word根据窗口的宽度而包装：
{"errorMessage": "\"['Date'] not in index\"", "errorTy
浏览 0提问于2021-10-26得票数 2
我正试着把日子从Days_To_Maturity专栏中删除。所以，不是0天，而是0。我尝试了一些东西，但我想知道是否有一个简单的方法来完成这个内置到python中。谢谢
In[12]:
from pandas import *
XYZ = read_csv('XYZ')
df_XYZ = DataFrame(XYZ)
df_XYZ.head()
Out[12]:
Dates Days_To_Maturity Yield
0 5/1/2002 Days 0 0.00
1 5/1/2002 Days
浏览 4提问于2014-06-28得票数 2
回答已采纳
当我尝试：
% conda update pandas
Collecting package metadata (current_repodata.json): done
Solving environment: |
Updating pandas is constricted by
anaconda -> requires pandas==1.0.5=py38h959d312_0
If you are sure you want an update of your package either try `conda update --all` or install a spe
浏览 0提问于2020-10-12得票数 2
回答已采纳
1回答
嘿，伙计们，我现在经常在VS代码中使用Pandas，我看到木星笔记本等中的DF看起来比VS代码要好得多。老实说，在VS代码中，它看起来非常混乱。这是我能得到的最漂亮的：，而它看起来像木星，等等：的东西更漂亮！有没有办法让这个看起来像这样呢？即使有很多专栏像我的案例57一样？我正在使用最新的Python，Pandas和VS-代码版本.
浏览 1提问于2022-05-01得票数 1
回答已采纳
使用Python3.6和Pandas0.19.2:如何读取excel文件并将列直接从read_excel更改为datetime？类似于。但是我想在某个专栏中以datetime的身份阅读
我想改变这一点：
import pandas as pd
import datetime
import numpy as np
file = 'PATH_HERE'
df1 = pd.read_excel(file)
df1['COLUMN'] = pd.to_datetime(df1['COLUMN']) # <--- Line to get rid
浏览 2提问于2017-03-23得票数 12
回答已采纳
1回答
我正在使用python / pandas。 我有一个这样的数据帧： date id my_column
0 31.07.20 128909 ['hey', 'hi']
1 31.07.20 128914 ['hi']
3 31.07.20 853124 ['hi', 'hello', 'hey']
4 30.07.20 123456 ['hey']
..
浏览 20提问于2020-10-16得票数 0
回答已采纳
2回答
用glob重复列读取多个文件
、、、、
我正在尝试将许多txt文件读入我的数据框架中，下面的代码可以工作。但是，它复制了我的一些专栏，而不是全部。我找不到解决办法。我能做些什么来防止这件事？
import pandas as pd
import glob
dfs = pd.DataFrame(pd.concat(map(functools.partial(pd.read_csv, sep='\t', low_memory=False),
glob.glob(r'/folder/*.txt')), sort=False))
假设我的数据应该如下所示：
但看起来
浏览 4提问于2019-11-19得票数 1
回答已采纳
import pandas as pd
import io
indata = io.StringIO("c\n10000000000")
df = pd.read_csv(indata, header=0)
print(df)
indata.seek(0)
df = pd.read_csv(indata, header=0, dtype={"c":int})
print(df)
预期产出：
c
0 10000000000
c
0 10000000000
实际产出：
c
0
浏览 0提问于2020-11-23得票数 1
回答已采纳
使用Python和Pandas，我有一个
dataframe
有一个题为“信件”的专栏
列表，letlist = 'a'，'b'，'c'，'d‘
我想要创建一个新的列，在这个列中，生成值将是列表中列字母中字符串的索引。
我试过了
df['letters_index'] = letlist.index(df['letters'])
然而，这是行不通的。你有什么意见建议？
浏览 0提问于2018-05-23得票数 0
回答已采纳
3回答
假设我有以下数据集：
我该如何创建一个新的专栏，成为最受欢迎的专栏呢？
例如，下面的代码适用于单个时间，但我还不能将其推广到pandas中的一个列。
t = datetime.strptime('9:33:07','%H:%M:%S')
print(t.hour)
浏览 0提问于2018-10-29得票数 4
回答已采纳
6回答
我有一个Pandas的数据，有一个专栏:犯罪类型。该专栏包含了16种不同的犯罪“类别”，我想把它们想象成一个词云，根据它们在数据中的频率来确定单词的大小。
我尝试使用以下代码来完成此操作：
将数据输入：
fields = ['Crime type']
text2 = pd.read_csv('allCrime.csv', usecols=fields)
要生成云这个词：
wordcloud2 = WordCloud().generate(text2)
# Generate plot
plt.imshow(wordcloud2)
plt.axis(&#
浏览 20提问于2017-04-25得票数 20
回答已采纳
我构造了这样一个DataFrame：
import pandas as pd
import seaborn as sns
import matplotlib.pyplot as plt
df = pd.DataFrame({
"x": [0, 1, 0, 1],
"y": [1, 2, 1.5, 3],
"sigma": [1, 1, 2, 2],
})
它支持漂亮的query特性：
# OK!
pts = df.query("sigma < 2")
print(pts)
和情节：
sns.line
浏览 3提问于2019-09-11得票数 1
1回答
我试图修改我的“能源供应”专栏，但正在抛出一个错误！
import pandas as pd
energy= pd.read_csv('Energy Indicators_v1.csv' , engine ='python')
energy[('Energy Supply')] = energy[('Energy Supply')].apply(lambda x:x*1000000)
print(energy)
KeyError：“能源供应”
你们能帮我解决这个问题吗？
浏览 2提问于2020-03-19得票数 0
回答已采纳
我在pandas.DataFrame中有一个标题为Residuals的专栏，它是timedelta格式的(例如00:00:01.14611)。我在Residuals列中有47个列出的值，我需要将它们全部转换回一个秒值(即1.14611)。我尝试过pd.to_numeric(df['Residual'].dt.seconds, downcast='integer')，但没有成功，还有一些其他的方法。
任何意见都将非常感谢，因为我对使用Python和pandas数据帧是非常陌生的。谢谢
浏览 0提问于2019-09-09得票数 1
1回答
我有一个熊猫数据框架my_df。animals列在my_df中具有数据类型“set”。然后，我尝试使用下面的代码来检查本专栏animals中有多少不同的值(集)
print(my_df.animals.unique())
但是得到了以下错误：
---------------------------------------------------------------------------
TypeError Traceback (most recent call last)
<ipython-input-13-e41c0
浏览 1提问于2017-03-10得票数 1
回答已采纳
6回答
我有一个专栏，名为费率，如下所示。我所要做的就是创建一个新的列Rate_New，它只从速率中提取数字部分，即0.25。怎么做？谢谢！！
import pandas as pd
df = pd.DataFrame({'Rate':['$0.25/Wh', '$0.25/Wh', '$0.25/Wh', '$0.25/Wh']})
df
浏览 7提问于2020-03-13得票数 2
回答已采纳
1回答
我对Python很陌生，但对R很熟悉。 我正在尝试转换使用pandas读取的非结构化Excel文件的列类型。我想要转换为数字的列包含格式时间和字符串。 ? 我想添加一个专栏hours在本例中说明了这一点8(18:00:00 - 10:00:00)。在R中，这非常简单，因为dplyr和as.numeric。 As.numeric转换18:00:00至18和Z至0。 我被pandas使用对象而不是列的单一类型的问题所困扰。有人能帮帮忙吗？ 谢谢
浏览 34提问于2021-02-25得票数 2
回答已采纳
我有一个Pandas与Facebook数据收集用克劳德塔格，在那里我想得到一些专栏的独特价值。
对于大多数列，这样的表达式工作得很好: df.column_name.unique()。示例：
In: df.account_name.unique()
Out: array(['YO TE BANCO VICTOR HUGO MORALES!!!',
'Lula de novo, com a força do povo',
'SOCIEDADE CIVIL, LEVANTA E RESISTE !', ..., '
浏览 4提问于2021-11-02得票数 0
The task：我有一系列的每日收盘价，我想实现以下目标：(i)计算任意5天窗口内任意两天之间的最大百分比变化(ii)将这些最大值存储在5天滚动窗口的基础上(iii)在所有5天滚动窗口上计算这些最大值的第99百分位数。
相当简单的问题。我对Python非常陌生，我发现自己混合了Python列表、Numpy数组和Pandas系列来实现上述目标，我确信这并不是高效编码的正确方法。
问题：我在下面附上我的代码。是否有一种方法可以实现相同的目标，而不必为这个简单的任务使用多个对象(即Pandas DataFrame，然后将其复制到Numpy Array，该数组用于修改Python列表，最终将其转换为
浏览 1提问于2020-06-17得票数 0
回答已采纳
我正在尝试使用pandas或re将google sheet regextract转换为python。 新的Google sheet列： =ArrayFormula(REGEXEXTRACT(F2,"([A-Z]+\-[0-9]+)")) 我不确定如何将其应用于整个专栏，以下是我的尝试，但最终导致错误 df["newcol"] = df['oldcol'].re.sub(([A-Z]+\-[0-9]+)
浏览 16提问于2021-07-28得票数 0
回答已采纳
目标从第一列创建第二列
column1, column2
Hello World, #HelloWord
US Election, #USElection
我有一个简单的文件，只有一个列
columnOne
Hello World
US Election
Movie Night
我写了以下函数
>>> def newColumn(row):
... r = "#" + "".join(row.split(" "))
... return r
然后我用熊猫创建了第二篇专栏文章
df['column2'
浏览 4提问于2016-10-18得票数 3
回答已采纳
在python和pandas中，我可以创建一个新的专栏，如下所示： 使用pandas dataframe中的两列来创建字典。 dict1 = dict(zip(data["id"], data["duration"])) 然后，我可以应用这个字典在第二个dataframe中创建一个新列。 df['id_duration'] = df['id'].map(lambda x: dict1[x] if x in dict1.keys() else -1) 如果我有一个数据帧id_duration (有两列：id和duration)和
浏览 38提问于2021-01-22得票数 0
回答已采纳
1回答
我正在尝试使用熊猫的“切割”方法，但是我得到了一个object has no attribute错误。我进口了熊猫，它也适用于其他命令。这是已知的问题还是我遗漏了什么？我重新开始Python，认为这可能只是一个随机的错误，但它似乎不是.
以下是完全错误：
python 2.7.3 (default, Sep 26 2013, 20:08:41)
[GCC 4.6.3] on linux2
Type "help", "copyright", "credits" or "license" for more information.
浏览 0提问于2014-01-03得票数 1
回答已采纳
域: Python & Pandas
我有一个时间序列数据框架，它有过去10年中每天的总客户数。
列是：
日期
总客户
在我的总客户专栏中有一些异常值。
我想将高于平均值的3个标准差之外的异常值重置为下面公式所定义的值。
异常值大于3SD =平均值+3S.D。
浏览 4提问于2018-11-21得票数 0
我目前正在尝试使用Azure木星笔记本打开拼花文件。我已经尝试过这两个Python内核(2和3)。安装py箭头之后，我只能在Python内核为2(不使用Python 3)的情况下才能导入模块。
以下是我到目前为止所做的工作(为了清楚起见，我没有提到我所有的尝试，比如使用conda而不是pip，因为它也失败了)：
!pip install --upgrade pip
!pip install -I Cython==0.28.5
!pip install pyarrow
import pandas
import pyarrow
import pyarrow.parquet
#so far,
浏览 2提问于2018-12-20得票数 2
回答已采纳
我得到了pandas的数据帧，如下所示：enter image description here 根据省份，有多个针对澳大利亚的列，这些列的标题是澳大利亚、澳大利亚1、澳大利亚2等等。美国、英国或加拿大等其他国家也是如此。我希望每个国家都只有一个专栏。例如，我希望有一个名为Australia的列，其中包含每个省份的值的总和，并且我希望避免重复的列名。如何在Python中使用pandas dataframe完成此操作？
浏览 33提问于2020-12-12得票数 2
回答已采纳
2回答
我正在学习Python中的数据探索。在实践pandas库时，我看到了两个名为df.assign()和df.apply()的函数。这两个函数的定义看起来非常相似。你能向我解释一下这两种功能及其独特的用例吗？
浏览 4提问于2021-01-08得票数 5
回答已采纳
我有一个带有datetimeindex的pandas.dataframe格式的股票每日价格。我想有一个专栏，显示本周收盘价的平均值。我不知道如何在文本中解释它。这就是它看起来的样子。请告诉我怎样才能得到“每周平均收盘价”这一栏。谢谢！example in excel
浏览 65提问于2020-04-12得票数 0
2回答
我有一个熊猫DataFrame，有两个栏(时间，心率)进口。
时间来自MM:SS.s格式(用于minutes:Seconds.miliseconds)。我正在尝试将这一次转换为秒的浮点数(例如0.6s或65.3s) (稍后用于折叠成10s窗口)。例如：
import pandas as pd
hr_raw = pd.read_csv('hr_data.csv')
hr_raw.dropna(inplace=True)
print(hr_raw.head())
Time HR bpm
0 00:00.6 97.0
1 00:01.0 92.0
浏览 0提问于2017-09-18得票数 1
回答已采纳
当我在databricks上运行python3.7代码时，我正在尝试解决熊猫的问题。 错误是： ImportError: cannot import name 'roperator' from 'pandas.core.ops' (/databricks/python/lib/python3.7/site-packages/pandas/core/ops.py) pandas版本： pd.__version__
0.24.2 我跑步 from pandas.core.ops import roperator 在我的笔记本电脑上 pandas 0.25.1
浏览 39提问于2020-09-10得票数 5
回答已采纳
我有一个问题，关于我的一个专栏，它的数据看起来像这样，我希望将其计算为年数。 ? 我试着使用df.apply并将它们分开，但是我被困在这里了。公式应为converted_years =年+月/12+天/365 import pandas as pd
df = pd.read_csv('C:/csv')
def years(c):
y = []
m = []
d = []
text = (c['years of service'])
g= text.split(' ')
浏览 8提问于2019-05-16得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
