当前位置：首页 > news >正文

【Pandas】pandas DataFrame agg

news 来源：原创 2025/8/21 20:11:27

Pandas2.2 DataFrame

Function application, GroupBy & window

方法	描述
DataFrame.apply(func[, axis, raw, …])	用于沿 DataFrame 的轴（行或列）应用一个函数
DataFrame.map(func[, na_action])	用于对 DataFrame 的每个元素应用一个函数
DataFrame.applymap(func[, na_action])	用于对 DataFrame 中的每一个元素应用一个函数
DataFrame.pipe(func, args, *kwargs)	用于实现链式编程风格的方法
DataFrame.agg([func, axis])	用于对 DataFrame 的数据进行聚合操作
DataFrame.aggregate([func, axis])	用于对 DataFrame 进行聚合操作的方法
DataFrame.transform(func[, axis])	用于对 DataFrame 的列或行应用函数
DataFrame.groupby([by, axis, level, …])	用于进行分组操作的核心方法

pandas.DataFrame.groupby()

pandas.DataFrame.groupby() 是 Pandas 中用于进行分组操作的核心方法。它允许你根据一个或多个列的值将数据分成不同的组，然后对每个组应用聚合、转换或过滤等操作。

一、方法签名

DataFrame.groupby(by=None, axis=0, level=None, as_index=True, sort=True, group_keys=True, observed=<no_default>, dropna=True)

二、参数说明

参数	类型	描述
`by`	mapping, function, label, or list of labels	分组依据。可以是列名、函数（用于处理索引）、字典映射、Series 或列表（多列分组）。
`axis`	int or str, default: 0	沿哪个轴分组：`0` 表示按行分组（默认），`1` 表示按列分组。
`level`	int or str, optional	如果轴是 MultiIndex，则按指定层级分组。
`as_index`	bool, default: True	是否将分组键作为结果的索引（仅在聚合时有效）。
`sort`	bool, default: True	是否对分组键排序。
`group_keys`	bool, default: True	在使用 `apply()` 时是否添加分组键到结果中。
`observed`	bool, default: False	控制是否只显示观察到的类别（适用于分类变量分组）。
`dropna`	bool, default: True	是否排除包含 `NaN` 的分组键。

三、返回值

返回一个 GroupBy 对象，支持链式调用：
- .agg()：聚合
- .transform()：变换
- .filter()：过滤
- .apply()：自定义函数

四、常用场景及示例

示例1：单列分组 + 聚合（`.agg()`）

import pandas as pddf = pd.DataFrame({'Category': ['A', 'B', 'A', 'B'],'Sales': [100, 200, 150, 250]
})# 按 Category 分组并求和
result = df.groupby('Category').agg({'Sales': 'sum'})
print(result)

输出：

           Sales
Category       
A            250
B            450

示例2：多列分组 + 多种聚合函数

df = pd.DataFrame({'Region': ['North', 'South', 'North', 'South'],'Product': ['X', 'X', 'Y', 'Y'],'Sales': [100, 150, 200, 250],'Units': [10, 15, 20, 25]
})# 按 Region 和 Product 分组，分别对 Sales 和 Units 进行不同聚合
result = df.groupby(['Region', 'Product']).agg(Total_Sales=('Sales', 'sum'),Avg_Units=('Units', 'mean')
)
print(result)

输出：

                   Total_Sales  Avg_Units
Region  Product                         
North   X                  100       10.0Y                  200       20.0
South   X                  150       15.0Y                  250       25.0

示例3：使用 `.transform()` 进行标准化

# 计算每组内的平均值并广播回原 DataFrame
df['Avg_Sales_By_Region'] = df.groupby('Region')['Sales'].transform('mean')
print(df)

输出：

    Region Product  Sales  Units  Avg_Sales_By_Region
0    North       X    100     10              150.0
1    South       X    150     15              200.0
2    North       Y    200     20              150.0
3    South       Y    250     25              200.0

示例4：使用 `.filter()` 筛选特定组

# 只保留总销售额大于 300 的区域
filtered_df = df.groupby('Region').filter(lambda x: x['Sales'].sum() > 300)
print(filtered_df)

输出：

   Region Product  Sales  Units
1  South       X    150     15
3  South       Y    250     25

示例5：使用 `.apply()` 自定义操作

# 对每个组应用自定义函数（如标准化）
def normalize(group):group['Norm_Sales'] = group['Sales'] / group['Sales'].sum()return groupresult = df.groupby('Region').apply(normalize)
print(result)

输出：

   Region Product  Sales  Units  Norm_Sales
0   North       X    100     10    0.333333
2   North       Y    200     20    0.666667
1   South       X    150     15    0.375000
3   South       Y    250     25    0.625000

五、注意事项

分组键类型：支持字符串、整数、日期、分类变量等。
性能优化：对于大型数据集，建议关闭 group_keys 和 sort 提升效率。
缺失值处理：默认不包括含 NaN 的分组键，可通过 dropna=False 改变行为。
as_index：若为 False，则分组键不会成为索引，适合输出表格化结果。

六、总结

方法	用途
`.agg()`	对每个分组执行聚合操作（如 sum、mean）
`.transform()`	对每个分组执行变换操作，返回与原数据相同长度的结果
`.filter()`	根据条件筛选符合条件的组
`.apply()`	对每个分组应用任意函数，灵活性最强

groupby() 是数据分析中最核心的操作之一，结合聚合、变换、过滤等功能，能实现复杂的数据分析任务。

【Pandas】pandas DataFrame agg

Pandas2.2 DataFrame Function application, GroupBy & window 方法描述DataFrame.apply(func[, axis, raw, …])用于沿 DataFrame 的轴（行或列）应用一个函数DataFrame.map(func[, na_action])用于对 DataFrame 的每个元素应用一个函数DataFrame.a…...

编程日记 2025/8/21 20:11:27

LearnOpenGL---绘制三角形

绘制三角形 #include <glad/glad.h> #include <GLFW/glfw3.h> #include <iostream>const unsigned int SCR_WIDTH 800; const unsigned int SCR_HEIGHT 600;/// <summary> /// 当用户改变窗口大小时，视口也应该被调整，因此编…...

编程日记 2025/8/19 7:56:24

使用 Poco C++ 库构建轻量级 HTTP 服务器

在现代 C 后端开发中，如果你需要构建一个轻量、高性能、可嵌入式的 HTTP 服务，而不愿引入重量级框架如 Boost.Beast 或 cpp-httplib，那么 Poco C Libraries 提供了一个优雅的解决方案。Poco 是一套广泛使用的 C 框架，涵盖网络、线…...

编程日记 2025/8/19 5:03:17

【Java EE初阶 --- 多线程（初阶）】多线程的基本内容

乐观学习，乐观生活，才能不断前进啊！！！ 我的主页：optimistic_chen 我的专栏：c语言 ，Java 欢迎大家访问~ 创作不易，大佬们点赞鼓励下吧~ 文章目录前言认识多线程(Thread的…...

编程日记 2025/8/18 21:25:08

[LitCTF 2023]babyLCG 题目： from Crypto.Util.number import * from secret import flagm bytes_to_long(flag) bit_len m.bit_length() a getPrime(bit_len) b getPrime(bit_len) p getPrime(bit_len1)seed m result [] for i in range(10):seed (a*see…...

编程日记 2025/8/18 18:59:13

CSS--图片链接垂直居中展示的方法

原文网址：CSS--图片链接垂直居中展示的方法-CSDN博客简介本文介绍CSS图片链接垂直居中展示的方法。图片链接问题复现源码 <html xml:lang"cn" lang"cn"><head><meta http-equiv"Content-Type" content&quo…...

编程日记 2025/8/19 7:56:16

用html+js+css实现的战略小游戏

效果图: 兄弟们，话不多说，直接上代码 <!DOCTYPE html> <html lang"zh-CN"> <head><meta charset"UTF-8"><meta name"viewport" content"widthdevice-width, initial-scale1.0">…...

编程日记 2025/8/19 7:56:14

【落羽的落羽 C++】list及其模拟实现

文章目录一、list介绍二、list模拟实现1. 节点2. 迭代器3. list 一、list介绍 list是我们之前学过的带头双向链表的类模板，具有链表的一系列性质，也有多种多样的接口便于使用，使用方法与vector大体相似： 函数接口说明list()构造…...

编程日记 2025/8/19 7:56:12

深入理解高性能网络通信：从内核源码到云原生实践

深入理解高性能网络通信：从内核源码到云原生实践前言随着互联网业务规模的高速增长，服务端网络通信能力成为系统性能的核心瓶颈。如何支撑百万级连接、在极限场景下实现低延迟高吞吐？本篇博客将围绕Linux通信机制内核剖析、性能调优实战、…...

编程日记 2025/8/21 20:11:26

全格式文档转 Markdown 工具，Docker 一键部署，支持 API 调用

以下是简要介绍： 这是一款可以快速将任意文档文件转markdown格式内容的工具，提供API转换接口，方便集成与应用原理就是利用libreoffice、pandoc文件转换工具，把所有文档类型的文件逐步转化，最终转成markdown格式的内容…...

编程日记 2025/8/19 7:56:08

算法思想之深度优先搜索（DFS）、递归以及案例（最多能得到多少克黄金、精准核酸检测、最富裕的小家庭）

深度优先搜索（DFS）、递归深度优先搜索（Depth First Search，DFS）是一种用于遍历或搜索树或图的算法。在 DFS 算法中，从起始节点开始，沿着一条路径尽可能深地访问节点，直到到达叶子节…...

编程日记 2025/8/19 7:56:06

Windows玩游戏的时候，一按字符键就显示桌面

最近打赛伯朋克 2077 的时候，不小心按错键了，导致一按字符键就显示桌面。如下： 一开始我以为是输入法的问题（相信打游戏的人都知道输入法和奔跑键冲突的时候有多烦），但是后来解决半天发现并不是。在网上搜…...

编程日记 2025/8/21 7:47:37

2025 后端自学UNIAPP【项目实战：旅游项目】1、创建项目框架

1、创建项目 ①项目名称：自定义，【我是travel】 ②vue版本：vue3 ③其他默认，最后创建 2、创建页面 ①展开自己刚才创建的项目 ②单击选中pages文件夹 --->鼠标右键---->新建页面 ③页面名称：自定义favouri…...

编程日记 2025/8/19 7:56:02

Tomcat中Web应用程序停止时为了防止内存泄漏，JDBC驱动程序被强制取消注册出现原因

1.问题描述本地Windows环境开发的Springboot项目同样的mysql版本，jdk版本，tomcat版本，本地运行没有任何问题，发布到阿里云服务器上时报以下问题： 06-May-2025 20:06:12.842 警告 [main] org.apache.catalina.loader…...

编程日记 2025/8/19 7:56:00

vitepress 复杂环境引入 mermaid

方式一： 参考官网，这里不赘述。方式二： pnpm add -D vitepress-plugin-mermaid pnpm add -D mermaidimport { MermaidMarkdown, MermaidPlugin } from vitepress-plugin-mermaid;export default defineConfig({markdown: {config(md) {md…...

编程日记 2025/8/21 17:50:22

盘古信息领德创|半导体存储与云计算存储小巨人企业IMS数字化升级项目正式启动！

在数字化和智能化浪潮下，数据已然成为企业核心资产。随着大模型应用加速落地和智算新基建推进，数据量呈爆炸式增长，存储作为数据基础设施的关键环节，正从传统的容量与性能保障，向数据智能处理、高效管理及安全可靠的全…...

编程日记 2025/8/21 12:17:16

Oracle04-基本使用

零、文章目录 Oracle04-基本使用 1、创建表空间 （1）创建语句 create tablespace testdata datafile c:\datafile\testdata.dbf size 100m autoextend on next 10m（2）参数说明 testdata：表空间名称datafile&#x…...

编程日记 2025/8/19 7:55:54

YOLO 从入门到精通学习指南

一、引言在计算机视觉领域，目标检测是一项至关重要的任务，其应用场景广泛，涵盖安防监控、自动驾驶、智能交通等众多领域。YOLO（You Only Look Once）作为目标检测领域的经典算法系列，以其高效、快速的特点受到了广泛的关注和应用。本学习指南将带领你从 YOLO 的基础概念…...

编程日记 2025/8/18 14:18:22

Linux 磁盘初始化与扩容操作手册

📦 1. 初始化服务器，新磁盘挂载为 LV ✅ 使用 ext4 格式 # 创建挂载目录 mkdir -p /datatmp# 初始化物理卷 sudo pvcreate /dev/sdb# 创建卷组 sudo vgcreate vg_data /dev/sdb# 创建逻辑卷（使用全部空间） sudo lvcreate -l 100…...

编程日记 2025/8/19 7:55:50

ShardingSphere：使用information_schema查询时报错：Table ‘数据库名称.tables‘ doesn‘t exist

目录简介异常信息SQL排查原因解决简介 1、程序jdk1.8升级为jdk21 2、ShardingSphere框架从4.1.1升级为5.2.1 3、使用 information_schema.tables 查询时报错异常信息 ### Error querying database. Cause: java.sql.SQLSyntaxErrorException: Table 数据库名称.tables …...

编程日记 2025/8/20 19:24:24

uniapp开发09-设置一个tabbar底部导航栏且配置icon图标

uniapp开发09-设置一个tabbar底部导航栏且配置icon图标！在实际项目开发中，经常会遇到需要设置icon图标的情况，而且底部导航通常都是有固定位置且内容不会轻易发生变化的。官方提供了自带的tabbar组件。我们来了解一下最基础的入门案例。 1&am…...

编程日记 2025/8/19 7:55:46

使用OpenCV 和 Dlib 实现年龄性别预测

文章目录引言1.系统架构2.代码解析2.1 模型初始化2.2 核心函数实现(1) 人脸检测函数 getBoxes()(2) 中文文本显示函数 3. 主循环流程4.关键技术点5.总结引言在计算机视觉领域，人脸检测与属性分析是一项基础且重要的技术。本文将详细介绍如何使用OpenCV和深度学习…...

编程日记 2025/8/19 7:55:44

SSTI学习

1，什么是模板模板引擎（这里特指用于Web开发的模板引擎）是为了使用户界面与业务数据（内容）分离而产生的，它可以生成特定格式的文档，利用模板引擎来生成前端的html代码，模板引擎会提供…...

编程日记 2025/8/21 16:44:16

0基础学习鸿蒙开发-HarmonyOS4

一、初识 1. 开发工具官网开发-HarmonyOS NEXT鸿蒙应用开发平台-华为开发者联盟 2. ArkTS 二、TypeScript 基本语法 1.变量声明 2. 条件控制注意在TypeScrips中空字符串数字0、null、undefined 都坡认为是false 其它值则为true if (num) {// num 非空执行 } 3. 循环迭…...

编程日记 2025/8/21 11:26:07

原生 IP（Native IP）

目录一、核心特点二、原生 IP 的常见应用三、原生 IP vs. 数据中心 IP 四、如何获取原生 IP？ 五、原生 IP 的优缺点六、实际案例原生 IP（Native IP） 是指由互联网服务提供商（ISP）直接分配给用户的 IP 地址&…...

编程日记 2025/8/20 20:33:31

python + whisper 读取蓝牙耳机，转为文字

1. 起因， 目的: 看到别人做了类似的效果。所以自己也想试试看。动手。 2. 先看效果 3. 过程: 我用的是蓝牙耳机，EDIFIER W820NB 先找到声音，设置为 Hands-Free 模式代码 1 ，查找设备名称， 看看哪个是能用的。我…...

编程日记 2025/8/19 7:55:36

Prometheus实战教程：k8s平台-使用文件服务发现案例

date: 2025-03-06 tags:- prometheus --- 1查看NODE-IPkubectl get node -o wideNAME STATUS ROLES AGE VERSION INTERNAL-IP EXTERNAL-IP OS-IMAGE KERNEL-VERSION CONTAINER-RUNTIMEk8s-node01 Ready &…...

编程日记 2025/8/18 16:30:04

黄金量化：高频实时的贵金属API

在风云变幻的投资领域，贵金属黄金市场一直备受瞩目。近期，黄金等贵金属报价API，价格走势犹如过山车，引发投资者高度关注。据 iTick 数据显示，截至 2025 年 5 月 6 日 15:30，黄金 TD 价格为 792.97 元 / 克&…...

编程日记 2025/8/19 7:55:32

人工智能在医疗运营编程中的应用综述

引言随着人工智能技术的迅猛发展，医疗行业正经历一场深刻的变革。人工智能不再仅限于辅助诊断或医学影像分析，而是逐步渗透到医疗运营的各个环节。医疗运营编程作为医院管理的核心，涵盖了从患者入院到出院的全过程管理，包括资源分配、工作流程优化、收入管理、供应链控制等…...

编程日记 2025/8/19 7:55:29

【心海资源】0U攻击工具｜一键模仿地址生成＋余额归集＋靓号生成系统

内容： 这是一款集合多种区块链辅助功能的0U攻击工具，无需部署环境、无需复杂配置，打开即可使用。主要功能包括： 0U攻击模块：模拟常见0U攻击场景，实现交易干扰与诱导。模仿地址生成：快速批量生成…...

编程日记 2025/8/19 7:55:28

Jenkins忘记admin密码后的恢复步骤

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言一、pandas是什么？二、使用步骤 1.引入库2.读入数据总结前言提示：这里可以添加本文要记录的大概内容： 时间较长没有使用…...

编程日记 2025/8/19 7:55:26

基于深度学习的智能仓储异常检测系统设计与实现

一、项目场景该设备主要应用于制造业、物流中心和仓储管理等场景。在制造业生产线上，该系统可用于实时监测产品的码垛状况，确保产品符合安全标准，避免因堆叠不当导致的产品损坏和生产停滞。在物流中心，系统能够监测卸货和入库过…...

编程日记 2025/8/21 13:52:53

安装篇--CentOS 7 虚拟机安装

CentOS 7 作为一个稳定且广泛使用的 Linux 发行版，是学习服务器管理和搭建各种服务（例如 Hadoop 集群）的理想平台。本次教程将教会大家如何在 VMware Workstation 虚拟机软件中一步步安装 CentOS 7 桌面环境。准备工作： 确保您的…...

编程日记 2025/8/19 7:55:21

【Fifty Project - D23】

今日完成记录 TimePlan完成情况8：30 - 9：30《挪威的森林》√14：00 - 16：00修改大论文√16：00 - 17：30和老板讨论√ 早上在轰隆隆的火车声和时而从窗帘钻进的刺眼阳光中醒来，并没有意识到假期已…...

编程日记 2025/8/19 7:55:19

从零开始学java--集合类（2）

集合类目录集合类 Queue 队列的使用： 双端队列（Deque） Map和Set 概念： 模型： Map 常见方法说明： 注意： TreeMap和HashMap的区别： Set 常见方法说明： 注…...

编程日记 2025/8/20 17:59:28

在Star-CCM+中实现UDF并引用场数据和网格数据

在Star-CCM中实现UDF并引用场数据和网格数据 Star-CCM中的用户自定义函数(UDF)允许用户通过Java或C/C编程扩展软件功能。下面我将详细介绍如何实现UDF并引用模拟数据。 1. UDF基础实现方法 1.1 创建UDF的步骤在Star-CCM中，右键点击"工具" → “用户函…...

编程日记 2025/8/19 6:09:55

WebRTC 服务器之SRS服务器性能优化配置

1.概述 SRS （Simple Realtime Server） 中提供的各种性能优化选项。这些选项允许您针对不同场景优化 SRS，从而在延迟、吞吐量和资源利用率之间取得平衡。有关常规配置的信息，请参阅配置。 1.1 性能提升目标流媒体服务器的性能通常…...

编程日记 2025/8/18 16:40:15

n8n 中文系列教程_20. n8n高效开发秘诀：单步调试与测试用例实战指南

在n8n低代码开发中，你是否遇到过工作流运行时出错却难以定位问题？或者精心设计的流程在处理新数据时突然崩溃？单步调试和测试用例是解决这些痛点的关键！本文将带你掌握精准调试技巧和高效测试方法，确保你的自动化流程稳…...

编程日记 2025/8/19 7:55:15

手机携号转网查询，一键查看号码是否可转网！

在现代社会，手机已经成为人们生活不可或缺的一部分。随着通讯技术的不断发展，手机用户们也有了更多的选择权利，比如携号转网。那么，如何方便地查询一个手机号是否可以进行携号转网呢？今天，我们就来介绍一款…...

编程日记 2025/8/18 23:01:59

多线程网络编程：粘包问题、多线程/多进程服务器实战与常见问题解析

多线程网络编程：粘包问题、多线程/多进程服务器实战与常见问题解析一、TCP粘包问题：成因、影响与解决方案 1. 粘包问题本质 TCP是面向流的协议，数据传输时没有明确的消息边界，导致多个消息可能被合并（粘包&#xf…...

编程日记 2025/8/21 4:01:26

【ArcGISPro】属性规则--属性联动

新建要素直接点击【完成】设置全局ID <...

编程日记 2025/8/19 7:55:09

五一感想：知识产权加速劳动价值！

今天是五一劳动节，祝各位网友劳动节快乐，昨天《中华人民共和国民营经济促进法》通过，普推知产老杨看到其中第三十三条专门就是针对知识产权的，加强对民营经济的原始创新保护。一个普通的小物件白牌可能就卖1元钱，但是…...

编程日记 2025/8/19 2:01:47

ORACLE EBS 12.1 启用https 简单策略

Oracle EBS 启用https的官方文档是Document 376700.1, Enabling TLS in Oracle E-Business Suite Release 12.1，上面各种配置比较繁琐，我们参照Using Load-Balancers with Oracle E-Business Suite Release 12.0 and 12.1 (Doc ID 380489.1) 这个文档来利…...

编程日记 2025/8/19 0:55:44

Sublime PrettyJson 快捷键

一、进入快捷键编辑页二、添加格式化、去掉格式化快捷键 [ { "keys": ["ctrlcommandj"], "command": "pretty_json"}, { "keys": ["ctrlcommandm"], "command": "un_pretty_json"}…...

编程日记 2025/8/19 7:55:07

【计算机网络】TCP为什么可靠？解决了哪些问题？

TCP提供了： 1.可靠传输 2.流量控制 3.拥塞控制 4.连接管理解决了数据在不可靠IP网络上的传输问题。下面具体分析这4个方面。 1.可靠性传输： TCP确保数据包在网络传输过程中不丢失、不重复，并且按顺序到达。通过确认(ACK)、重传机制以…...

编程日记 2025/8/21 18:26:02

AI服务器的作用都有哪些?

根据网络环境的飞速发展，人工智能技术逐渐入驻到各个行业当中，其中AI服务器则是一种专门用来运行人工智能算法和模型的硬件设备，通常具备高性能计算、大容量存储和并行计算等多种功能，本文就来详细讲解一下AI服务器的作用&#xf…...

编程日记 2025/8/19 7:55:03

移动应用开发：自定义 View 处理大量数据的性能与交互优化方案

实现 1 万条数据下流畅滑动与灵敏交互的完美平衡。一、数据渲染优化：从 1 万条到丝滑体验 （一）视图复用机制视图复用是提升大量数据渲染性能的关键策略。以一个简单的自定义列表视图为例，我们可以构建如下的复用池管理机制&a…...

编程日记 2025/8/20 11:53:19

在 Ubuntu 下使用 ESP-IDF 通过串口烧录 ESP32

1. 准备工作 (1) 安装 ESP-IDF 环境确保已完成 ESP-IDF 的安装和配置（参考官方文档）： bash 复制下载 git clone --recursive https://github.com/espressif/esp-idf.git cd esp-idf ./install.sh . ./export.sh (2) 连接开发板通过…...

编程日记 2025/8/18 18:16:41

探索SQLMesh中的Jinja宏：提升SQL查询的灵活性与复用性

在数据工程和数据分析领域，SQL是不可或缺的工具。随着项目复杂度的增加，如何高效地管理和复用SQL代码成为了一个重要课题。SQLMesh作为一款强大的工具，不仅支持标准的SQL语法，还引入了Jinja模板引擎的宏功能，极大地提升…...

编程日记 2025/8/18 14:35:44

【Linux】Linux中的调度和切换

一、引入基本概念在任何的分时操作系统中，其调度都是较为公平的调度。在来回顾一下关于优先级为什么会被限制的问题： Linux为什么调整优先级是要受到限制的呢？？ 如果不加限制，将自己进程的优先级调整到非常高&#xf…...

编程日记 2025/8/19 11:08:31