【pandas之聚合函数agg方法实战记录】

系列文章目录

二,pandas之聚合函数agg的使用

文章目录


前言

在pandas中, 为了统一计算多列数据的不同值不如求和,计数,最大值,最小值,中位数,平均值等,引入agg聚合函数,aggaggregate两个函数指向同一个方法,使用时写任意一个即可。

一、pandas是什么?

pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。

二、使用步骤

1.引入库

代码如下:

import numpy as np
import pandas as pd

2.读入数据

agg前的DataFrame数据new_nor_sum2_df, debug一下展示数据结构如下:

3.统计相同'的代发薪公司'的数据,各列求和汇总

 代码如下:

new_nor_sum2_group = new_nor_sum2_df[
            ~new_nor_sum2_df[('发薪公司', '')].str.endswith('小计')].groupby(
            [('代发薪公司', '')]).agg(
            {('中国籍', '人数'): 'sum', ('中国籍', '工资个税'): 'sum', ('非中国籍', '人数'): 'sum',
             ('非中国籍', '工资个税'): 'sum',
             ('合计', '人数'): 'sum', ('合计', '工资个税小计'): 'sum'})

 分三大步:

        (1)筛选出new_nor_sum2_df中不以"小计"两个字结尾的"发薪公司"的数据,因为带有"小计"尾缀的数据针对具有相同"代申报公司"数据的求和,不应该计入总计.如下图所示的

                                        筛选前有72条数据

         

                                            筛选后有68条数据 

        (2)按照"代发薪公司"的不同用groupby进行分组;

new_nor_sum2_df[
            ~new_nor_sum2_df[('发薪公司', '')].str.endswith('小计')].groupby(
            [('代发薪公司', '')])

        (3)groupby分组后接上agg聚合函数,写入每列的统计方法时用大括号括起来

        聚合的方法有: 计数count,求和sum,最大值max,最小值min平均值mean,中位数median等

new_nor_sum2_group = new_nor_sum2_df[
            ~new_nor_sum2_df[('发薪公司', '')].str.endswith('小计')].groupby(
            [('代发薪公司', '')]).agg(
            {('中国籍', '人数'): 'sum', ('中国籍', '工资个税'): 'sum', ('非中国籍', '人数'): 'sum',
             ('非中国籍', '工资个税'): 'sum',
             ('合计', '人数'): 'sum', ('合计', '工资个税小计'): 'sum'})

4.聚合后的group对象的数据在前面新增4列("代发薪公司",'发薪公司','代申报公司', '纳税地'),'发薪公司'的值为'总计'

new_nor_sum2_group.insert(0, "代发薪公司", list(new_nor_sum2_group.index))
        new_nor_sum2_group.insert(1, '发薪公司', '总计')
        new_nor_sum2_group.insert(2, "代申报公司", '')
        new_nor_sum2_group.insert(3, "纳税地", '')
new_nor_sum2_df = new_nor_sum2_df.append(new_nor_sum2_group)

5.对各个要统计的列进行求和

        group_cn_per = new_nor_sum2_group[('中国籍', '人数')].sum()  # 中国籍'人数'总和
        group_cn_tax = new_nor_sum2_group[('中国籍', '工资个税')].sum()  # 中国籍'工资个税'总和
        group_ncn_per = new_nor_sum2_group[('非中国籍', '人数')].sum()  # 非中国籍'人数'总和
        group_ncn_tax = new_nor_sum2_group[('非中国籍', '工资个税')].sum()  # 非中国籍'工资个税'总和
        group_total_per = new_nor_sum2_group[('合计', '人数')].sum()  # 合计'人数'总和
        group_total_tax = new_nor_sum2_group[('合计', '工资个税小计')].sum()  # 合计'工资个税小计'总和

最后,把该group对象的所有值放回到原来的new_nor_sum2_df中

new_nor_sum2_df = pd.DataFrame(
            np.insert(new_nor_sum2_df.values, len(new_nor_sum2_df.index),
                      values=new_nor_sum2_group, axis=0))

debug一下展示效果

 因为篇幅原因,若展示全图,CSDN显示会模糊,故展示部分图片


总结

       使用agg聚合函数进行统计各种类型的值时,先要进行groupby分组操作,按照需要统计的某一个维度(某一列)统一进行聚合计算(count,sum,max.mean等)

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


学习编程是顺着互联网的发展潮流,是一件好事。新手如何学习编程?其实不难,不过在学习编程之前你得先了解你的目的是什么?这个很重要,因为目的决定你的发展方向、决定你的发展速度。
IT行业是什么工作做什么?IT行业的工作有:产品策划类、页面设计类、前端与移动、开发与测试、营销推广类、数据运营类、运营维护类、游戏相关类等,根据不同的分类下面有细分了不同的岗位。
女生学Java好就业吗?女生适合学Java编程吗?目前有不少女生学习Java开发,但要结合自身的情况,先了解自己适不适合去学习Java,不要盲目的选择不适合自己的Java培训班进行学习。只要肯下功夫钻研,多看、多想、多练
Can’t connect to local MySQL server through socket \'/var/lib/mysql/mysql.sock问题 1.进入mysql路径
oracle基本命令 一、登录操作 1.管理员登录 # 管理员登录 sqlplus / as sysdba 2.普通用户登录
一、背景 因为项目中需要通北京网络,所以需要连vpn,但是服务器有时候会断掉,所以写个shell脚本每五分钟去判断是否连接,于是就有下面的shell脚本。
BETWEEN 操作符选取介于两个值之间的数据范围内的值。这些值可以是数值、文本或者日期。
假如你已经使用过苹果开发者中心上架app,你肯定知道在苹果开发者中心的web界面,无法直接提交ipa文件,而是需要使用第三方工具,将ipa文件上传到构建版本,开...
下面的 SQL 语句指定了两个别名,一个是 name 列的别名,一个是 country 列的别名。**提示:**如果列名称包含空格,要求使用双引号或方括号:
在使用H5混合开发的app打包后,需要将ipa文件上传到appstore进行发布,就需要去苹果开发者中心进行发布。​
+----+--------------+---------------------------+-------+---------+
数组的声明并不是声明一个个单独的变量,比如 number0、number1、...、number99,而是声明一个数组变量,比如 numbers,然后使用 nu...
第一步:到appuploader官网下载辅助工具和iCloud驱动,使用前面创建的AppID登录。
如需删除表中的列,请使用下面的语法(请注意,某些数据库系统不允许这种在数据库表中删除列的方式):
前不久在制作win11pe,制作了一版,1.26GB,太大了,不满意,想再裁剪下,发现这次dism mount正常,commit或discard巨慢,以前都很快...
赛门铁克各个版本概览:https://knowledge.broadcom.com/external/article?legacyId=tech163829
实测Python 3.6.6用pip 21.3.1,再高就报错了,Python 3.10.7用pip 22.3.1是可以的
Broadcom Corporation (博通公司,股票代号AVGO)是全球领先的有线和无线通信半导体公司。其产品实现向家庭、 办公室和移动环境以及在这些环境...
发现个问题,server2016上安装了c4d这些版本,低版本的正常显示窗格,但红色圈出的高版本c4d打开后不显示窗格,
TAT:https://cloud.tencent.com/document/product/1340