首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Python数据处理,pandas 统计连续停车时长

    (白色行):由于有些车是停放多于1小时才开走,统计一天中,连续停放n(1至10)小时的数量 如下: 第一个停车位中,连续出现3次的区域只有一个(3个"GG") ,因此这个停车位"连续停车3小时"结果是...,分组统计即可: 我这只考虑一列的处理情况,因为所有列批量处理只需要调用 apply 即可 这里同样可以使用 Series.value_counts() 做到一样的效果 基于这个结果,统计每一种次数的计数即可...: 行3:按之前的处理,统计次数 注意此时结果是一个 Series,index(上图红框) 是"连续n小时停车"。...value(上图蓝框) 是连续n小时停车出现的次数 把这个过程定义为一个函数: 行6:选出一列执行看看效果 最后,通过 apply 就能处理所有的列: 注意 行索引(蓝框) 是"连续n小时停车" 但是...看看第5个停车点: 连续停4个小时应该有1个吧 大于4个小时的应该是0吧 但是我们的结果是: 连续6小时竟然有1次 原来,我们的统计过程只是简单的按车牌分组统计,却没有考虑连续问题。

    1.4K50

    用Python统计新浪微博各种表情使用频率

    用新浪微博API积累了微博广场的1.4万条数据,我选择了21个字段输出为TXT文件,想用Python稍微处理一下,统计一下这1.4万条微博里面表情使用情况,统计结构在最后。...无聊的时候用了下新浪JAVA版的API,对JAVA还不熟悉,但是稍微改一下还是没问题的,数据保存为TXT文件,再用Python处理,JAVA部分很简单,Python部分只涉及到表情的正则提取,都不好意思写出来了...3、Python处理数据 目标:查看微博用户表情使用情况,暂时只分性别,如果积累了合适的数据后可以分析各个时间段人们爱用哪种表情。...步骤: $ 读取TXT文件,递归处理每一行 $ 单独提取出微博字段,正则提取表情字段,同时把性别提取出来,放到一个dict里面,dict的格式是:表情/女性使用频率/男性使用频率,递归处理,累积频率 $...把结果写入到文件 注意:Python正则提取中文部分,先解码成unicode编码,再正则提取,表情的标志是[],虽有误差,但无大碍。

    75340

    用Python统计 新浪微博 各种表情使用频率

    用新浪微博API积累了微博广场的1.4万条数据,我选择了21个字段输出为TXT文件,想用Python稍微处理一下,统计一下这1.4万条微博里面表情使用情况,统计结构在最后。...无聊的时候用了下新浪JAVA版的API,对JAVA还不熟悉,但是稍微改一下还是没问题的,数据保存为TXT文件,再用Python处理,JAVA部分很简单,Python部分只涉及到表情的正则提取,都不好意思写出来了...3、Python处理数据 目标:查看微博用户表情使用情况,暂时只分性别,如果积累了合适的数据后可以分析各个时间段人们爱用哪种表情。...步骤: $ 读取TXT文件,递归处理每一行 $ 单独提取出微博字段,正则提取表情字段,同时把性别提取出来,放到一个dict里面,dict的格式是:表情/女性使用频率/男性使用频率,递归处理,累积频率 $...把结果写入到文件 注意:Python正则提取中文部分,先解码成unicode编码,再正则提取,表情的标志是[],虽有误差,但无大碍。

    1.1K50

    利用Python统计连续登录N天或以上用户

    在有些时候,我们需要统计连续登录N天或以上用户,这里采用python通过分组排序、分组计数等步骤实现该功能,具体如下: 导入需要的库 import pandas as pd import numpy as...但是我们需要统计的时间单位是以日为周期,故而这里可以先做简单的去掉时间部分的处理方式 采用字符串的split方法,按照‘ ’(空格)进行切片,取第一部分即可 #因为日期数据为时间格式,可以简单使用字符串按照空格切片后取第一部分...方法进行处理 df["@timestamp"] = pd.to_datetime(df["@timestamp"]) #将日期列转化为 时间格式 第三步,分组排序 分组排序是指将每个用户登录日期进行组内排序...用来表示减去的是天数,这样获得的差值就会是一个日期 df['date_sub'] = df['@timestamp'] - pd.to_timedelta(df['辅助列'],unit='d') #计算登录日期与组内排序的差值...第六步,计算每个用户连续登录最大天数 这里用到的是sort_values和first方法,对每个用户连续登录天数做组内排序(降序),再取第一个值即为该用户连续登录最大天数 data = data.sort_values

    3.4K30

    资深Python程序员教你统计,三国中人物名字出现的频率,很简单

    资深Python程序员教你简单、有趣的程序: 使用第三方库jieba切分,统计统计名著三国演义中人物名字出现次数。...资深Python程序员教你统计,三国中人物名字出现的频率,很简单 其中一个jieba库是一个对中文文本依照汉字间关联概率进行词组划分的第三方库,使用简单,且非常好用 import jieba def...format(i+1, word, count, chr(12288))) # chr(12288)为中文空格 ``` 结果如下,当然其中类似将军、英雄、主公、大哥、君这种词语无法判断指的是谁,这里仅统计能够判断的...     89 26     夏侯渊     88 27     王平     88 28     刘璋     85 29     袁术     84 30     吕蒙     83 以上是Python

    1.8K30

    Python数据分析之数据探索分析(EDA)

    分类: 按内容分:单位总量指标(人、物、…); 标志总量指标 (营业额、利润、…) 按时间不同分:时期指标、时点指标 按计量不同分:实物指标、价值指标、劳动量指标 2、分布分析 揭示数据分布特征和分布类型...定量数据等分布分析 预得到其分布形式是对称的还是非对称的、发现某些特大或特小的可疑值,可做频率分布表、频率分布直方图、绘制茎叶图进行直观分析。重点是选择"组数"和"组宽"。...易受极端值的影响,受max的影响程度 > 受min的影响程度 简单算术平均:所有数据的平均值 加权算术平均数:反映均值中不同成分的重要程度 频率分布表组中值和频率: 调和平均数(harmonic...> df = pd.DataFrame([1,2,3,4,5,6,7,8]) >>> df.mean() 0 4.5 dtype: float64 中位数(Median) ----又称中值,是按顺序排列的一组数据中居于中间位置的数...将数据从小到大排列后 为奇数 众数(Mode) ----指在统计分布上具有明显集中趋势点的数值,代表数据的一般水平。也是一组数据中出现次数最多的数值,有时众数在一组数中有好几个。

    3.8K50

    数据分析之描述性分析

    SPSS的模块按功能可以分为三部分:描述性分析、推断性分析、探索性分析。...文/黄成甲 频率分析 频率分析主要通过频数分布表、条形图和直方图,以及集中趋势和离散趋势的各种统计量来描述数据的分布特征,以便我们队数据的分布特征形成初步的认识,才能发现隐含在数据背后的信息,为后续数据分析提供方向和依据...频率分析包括分类变量的频率分析和连续变量的频率分析。在SPSS里都采用频率表来做频率分析。对于连续变量数据的分析,描述的统计量包括百分位值、集中趋势、离散趋势和数据分布特征。...条形图和直方图的区别: (1)条形图用于展示分类数据,直方图用于展示连续数据; (2)条形图是用条形的长度表示各类别频数的多少,直方图是用面积表示各组频数的多少,矩形的高度表示每一组的频数或频率,宽度表示各组的组距...; (3)直方图分组数据具有连续性,所以直方图的各矩形通常是连续排列的,而条形图表示分类数据,则是分开排列; 描述分析 描述分析与频率分析的不同之处在于: (1)描述分析提供的统计量仅适用于连续变量,频率分析既可用于分析连续变量

    6.1K20

    python数据分析——数据分类汇总与统计

    Python作为一种高效、简洁且易于学习的编程语言,在数据分析领域展现出了强大的实力。本文将介绍如何使用Python进行数据分类汇总与统计,帮助读者更好地理解和应用数据。...Python提供了丰富的数据处理工具,如数据清洗、缺失值处理、异常值检测等,使得数据分析过程更加高效和准确。 总之,Python作为一种强大的数据分析工具,可以帮助我们轻松地进行数据分类汇总与统计。...它类似于SQL中的GROUP BY语句,可以对数据进行分组并对每个组进行统计、计算或其他操作。 下面是一些常见的使用Groupby的操作: 分组操作:通过指定一个或多个列名,将数据集分成不同的组。...pandas的crosstab是一个用于计算交叉频率表的函数。交叉频率表是一种展示两个或多个变量之间关系的统计表格。pandas的crosstab函数可以根据给定的数据和索引来计算这些交叉频率表。...它可以改变时间序列数据的频率,将数据从高频率转换为低频率(如从天到月),或者将数据从低频率转换为高频率(如从月到天)。重采样可以帮助我们对数据进行更好的分析和可视化。

    15310

    Python数据分析入门(十五):绘制直方图

    Python爬虫、数据分析、网站开发等案例教程视频免费在线观看 https://space.bilibili.com/523606542 Python学习交流群:1039649593 直方图(Histogram...),又称质量分布图,是一种统计报告图,由一系列高度不等的条纹表示数据分布的情况。...这些值通常被指定为连续的,不重叠的变量间隔。间隔必须相邻,并且通常是(但不是必须的)相等的大小。...density:默认是False,如果等于True,那么将会使用频率分布直方图。每个条形表示的不是个数,而是频率/组距(落在各组样本数据的个数称为频数,频数除以样本总个数为频率)。...每个区间内值出现的个数,如果density=True,那么这个将返回的是频率/组距。 bins:数组。区间的值。 patches:数组。

    1.2K50

    EMR入门学习之集群的监控与告警(四)

    例如指标为“CPU 利用率” 、比较关系为 > 、阈值为 80% 、统计周期为5分钟 、持续周期为 2个周期表示:每5分钟收集一次 CPU 利用率数据,若某台云服务器的 CPU 利用率连续三次大于80%...即当告警产生时,您可以定义告警以特定的频率重复通知。 可选:不重复、5分钟、10分钟、周期指数递增...等重复频率。...重复告警默认逻辑: 告警产生后的24小时内,将按您设定的重复通知频率重复给您发送告警信息。 告警产生满24小时,将默认切换为1天通知1次的策略进行重复通知。...例如指标为 CPU利用率 、比较关系为 > 、阈值为 80% 、统计周期为 5 分钟 、持续周期为 2 个周期 表示:每 5 分钟收集一次CPU利用率数据,若某台云服务器的 CPU 利用率连续两次大于80%...即当告警产生时,您可以定义告警以特定的频率重复通知。 可选:不重复、5分钟、10分钟、周期指数递增...等重复频率。

    1.5K10

    阿尔茨海默症神经活动的动态行为特征: 探讨静息态EEG的非平稳性和递归结构

    此外,与传统的基于频谱的频率分析相反,它们不假定平稳性。 2.3.1连续小波变换(CWT) CWT的计算需要调整几个参数。在这项研究中,Morlet小波被用作母小波,因为它在生物学上似乎适合脑电信号。...利用连续小波变换在1~70Hz频率范围内计算KLD,然后在所研究的频段内求平均,并将COI预先应用于小波。...受试者按年龄(χ2(2)=5.47,p=0.065,Kruskal-Wallis检验)和性别(χ2(2)=2.35,p=0.309,卡方检验)进行配对。...两组各指标间差异均无统计学意义(p>0.05)。...在α、β-2和全局频段中,只有对照组与其他两组有统计学意义的差异,而在δ和γ频段,只有对照组和MCI受试者有统计学意义的差异。最后,在β-1频段,只有在对照组和AD患者之间有统计学意义的差异。

    43200
    领券