首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >15个高效的Pandas代码片段

15个高效的Pandas代码片段

作者头像
deephub
发布2023-10-19 15:02:40
发布2023-10-19 15:02:40
6950
举报
文章被收录于专栏:DeepHub IMBADeepHub IMBA

Python的Pandas库是数据科学家必备的基础工具,在本文中,我们将整理15个高级Pandas代码片段,这些代码片段将帮助你简化数据分析任务,并从数据集中提取有价值的见解。

过滤数据

代码语言:javascript
复制
 import pandas as pd
 
 # Create a DataFrame
 data = {'Name': ['Alice', 'Bob', 'Charlie', 'David'],
         'Age': [25, 30, 35, 40]}
 
 df = pd.DataFrame(data)
 
 # Filter rows where Age is greater than 30
 filtered_df = df[df['Age'] > 30]
 print(filtered_df)

分组和聚合数据

代码语言:javascript
复制
 # Grouping by a column and calculating the mean
 grouped = df.groupby('Age').mean()
 print(grouped)

处理缺失数据

代码语言:javascript
复制
 # Check for missing values
 missing_values = df.isnull().sum()
 
 
 # Fill missing values with a specific value
 df['Age'].fillna(0, inplace=True)

将函数应用于列

代码语言:javascript
复制
 # Applying a custom function to a column
 df['Age'] = df['Age'].apply(lambda x: x * 2)

连接DataFrames

代码语言:javascript
复制
 # Concatenate two DataFrames
 df1 = pd.DataFrame({'A': ['A0', 'A1'], 'B': ['B0', 'B1']})
 df2 = pd.DataFrame({'A': ['A2', 'A3'], 'B': ['B2', 'B3']})
 
 
 result = pd.concat([df1, df2], ignore_index=True)
 print(result)

合并DataFrames

代码语言:javascript
复制
 # Merge two DataFrames
 left = pd.DataFrame({'key': ['A', 'B', 'C'], 'value': [1, 2, 3]})
 right = pd.DataFrame({'key': ['B', 'C', 'D'], 'value': [4, 5, 6]})
 
 merged = pd.merge(left, right, on='key', how='inner')
 print(merged)

数据透视表

代码语言:javascript
复制
 # Creating a pivot table
 pivot_table = df.pivot_table(index='Name', columns='Age', values='Value')
 print(pivot_table)

处理日期时间数据

代码语言:javascript
复制
 # Converting a column to DateTime
 df['Date'] = pd.to_datetime(df['Date'])

数据重塑

代码语言:javascript
复制
 # Melting a DataFrame
 melted_df = pd.melt(df, id_vars=['Name'], value_vars=['A', 'B'])
 print(melted_df)

使用分类数据类型

代码语言:javascript
复制
 # Encoding categorical variables
 df['Category'] = df['Category'].astype('category')
 df['Category'] = df['Category'].cat.codes

数据采样

代码语言:javascript
复制
 # Randomly sample rows from a DataFrame
 sampled_df = df.sample(n=2)

计算累计和

代码语言:javascript
复制
 # Calculating cumulative sum
 df['Cumulative_Sum'] = df['Values'].cumsum()

删除重复项

代码语言:javascript
复制
 # Removing duplicate rows
 df.drop_duplicates(subset=['Column1', 'Column2'], keep='first', inplace=True)

快捷进行onehot编码

代码语言:javascript
复制
 dummy_df = pd.get_dummies(df, columns=['Category'])

导出数据

代码语言:javascript
复制
 df.to_csv('output.csv', index=False)

为什么要加上导出数据呢?,因为在导出数据时一定要加上index=False参数,这样才不会将pandas的索引导出到csv中。

总结

这15个Pandas代码片段将大大增强您作为数据科学家的数据操作和分析能力。将它们整合到的工作流程中,可以提高处理和探索数据集的效率和效率。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2023-10-11,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 DeepHub IMBA 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 过滤数据
  • 分组和聚合数据
  • 处理缺失数据
  • 将函数应用于列
  • 连接DataFrames
  • 合并DataFrames
  • 数据透视表
  • 处理日期时间数据
  • 数据重塑
  • 使用分类数据类型
  • 数据采样
  • 计算累计和
  • 删除重复项
  • 快捷进行onehot编码
  • 导出数据
  • 总结
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档