百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

pandas知识课堂:apply和agg函数,如何传递参数?

ztj100 2025-04-09 22:45 40 浏览 0 评论

在数据处理过程中,我们在使用apply和agg函数的时候,一般都是直接使用自定义函数的名称,即默认带入自定义函数中的只有1个隐式参数(每个分组)。比如下面的例子:

df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])

def fm(sr):
    return sr.unique()

res = g.agg({'rev':sum, 'bj':fm})
print(res.reset_index())
 name  year  rev                  bj
0   大狗  2020    3  [2020dg1, 2020dg2]
1   大狗  2021    3            [2021dg]
2   大狗  2022    9            [2022dg]
3   李四  2019   21              [lisi]
4   李四  2021   19              [lisi]

我们在agg()中的字典里,对bj列使用自定义函数fm时,直接用的是fm的名称,在定义自定义函数时,即def fm(sr),我们加入了隐式的参数sr,这里sr是每个分组(pd.Series)。

但是,我们想在自定义函数fm中传递参数,应该如何使用呢?

一、agg中传递参数

方法1:使用lambda

df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])

def fm(sr,tmp):
    res = sr.unique()
    res = [tmp+s for s in res]
    return '、'.join(res)

res = g.agg({'rev':sum, 'bj':lambda sr:fm(sr,'BJ_')})
print(res.reset_index())
  name  year  rev                     bj
0   大狗  2020    3  BJ_2020dg1、BJ_2020dg2
1   大狗  2021    3              BJ_2021dg
2   大狗  2022    9              BJ_2022dg
3   李四  2019   21                BJ_lisi
4   李四  2021   19                BJ_lisi

注意,agg()中的字典键值对'bj':lambda sr:fm(sr,'BJ_'),直接使用自定义函数是'bj':fm,定义def fm(sr);而这里使用的'bj': lambda sr: fm(sr,'BJ_'),定义def fm(sr,tmp)

这里传递了参数'BJ_',将这个字符串带入到自定义函数fm中,将每个分组中的元素前面加上这个字符串。同理,我们可以传递2个参数 'bj': lambda sr: fm(sr,'BJ_', 4),定义def fm(sr,tmp, num)。参数'BJ_'是字符串,参数4是数值,定义def fm()中有3个参数。

方法2:使用partial绑定自定义函数和传递的参数

from functools import partial
df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])

def fm(sr,tmp, num):
    res = sr.unique()
    res = [tmp + str(num) + '_' +s for s in res]
    return '、'.join(res)

new_fm = partial(fm, tmp='BJ_', num = 4)

res = g.agg({'rev':sum, 'bj':new_fm})
print(res.reset_index())
  name  year  rev                         bj
0   大狗  2020    3  BJ_4_2020dg1、BJ_4_2020dg2
1   大狗  2021    3                BJ_4_2021dg
2   大狗  2022    9                BJ_4_2022dg
3   李四  2019   21                  BJ_4_lisi
4   李四  2021   19                  BJ_4_lisi

这里使用partial函数将函数fm和2个传递的参数进行绑定,然后将新函数new_fm,作为agg中的聚合函数来使用。

二、apply中传递参数

df = pd.read_excel('d:/fqb/2/tmp.xlsx')
g = df.groupby(['name','year'])

def fm(dj):
    res = dj.shape[0]
    return res

res = g.apply(fm)
print(res.reset_index())
  name  year  0
0   大狗  2020  2
1   大狗  2021  1
2   大狗  2022  2
3   李四  2019  3
4   李四  2021  2

使用apply得到按name和year分组的每组(DataFrame类型)的行数。结果只保留了2个分组列和fm返回的结果组成的1列。

df = pd.read_excel('d:/fqb/2/tmp.xlsx')

def fm(ve,num):
    return ve + num

res = df['rev'].apply(fm, args=(1.2,))
print(res)

将df的rev列的每个元素都加上1.2。

df = pd.read_excel('d:/fqb/2/tmp.xlsx')

def fm(ve,num, rate):
    return (ve + num)*(1+rate)

res = df['rev'].apply(fm, args=(1,0.1))
print(res)

将df的rev列的每个元素都加上1后再增加10%(0.1)。

df = pd.read_excel('d:/fqb/2/tmp.xlsx')

def fm(row,num, rate):
    res = row['sex'] + '_' + row['bj']
    return res + str(num) + '_' + str(rate)

res = df.apply(fm, args=(1,0.1), axis=1)
print(res)

使用整个df,而不是df的某个列。这里row就是df的一行数据,axis=1是按行读取,row可以直接按列名称提取该行的值。

相关推荐

30天学会Python编程:16. Python常用标准库使用教程

16.1collections模块16.1.1高级数据结构16.1.2示例...

强烈推荐!Python 这个宝藏库 re 正则匹配

Python的re模块(RegularExpression正则表达式)提供各种正则表达式的匹配操作。...

Python爬虫中正则表达式的用法,只讲如何应用,不讲原理

Python爬虫:正则的用法(非原理)。大家好,这节课给大家讲正则的实际用法,不讲原理,通俗易懂的讲如何用正则抓取内容。·导入re库,这里是需要从html这段字符串中提取出中间的那几个文字。实例一个对...

Python数据分析实战-正则提取文本的URL网址和邮箱(源码和效果)

实现功能:Python数据分析实战-利用正则表达式提取文本中的URL网址和邮箱...

python爬虫教程之爬取当当网 Top 500 本五星好评书籍

我们使用requests和re来写一个爬虫作为一个爱看书的你(说的跟真的似的)怎么能发现好书呢?所以我们爬取当当网的前500本好五星评书籍怎么样?ok接下来就是学习python的正确姿...

深入理解re模块:Python中的正则表达式神器解析

在Python中,"re"是一个强大的模块,用于处理正则表达式(regularexpressions)。正则表达式是一种强大的文本模式匹配工具,用于在字符串中查找、替换或提取特定模式...

如何使用正则表达式和 Python 匹配不以模式开头的字符串

需要在Python中使用正则表达式来匹配不以给定模式开头的字符串吗?如果是这样,你可以使用下面的语法来查找所有的字符串,除了那些不以https开始的字符串。r"^(?!https).*&...

先Mark后用!8分钟读懂 Python 性能优化

从本文总结了Python开发时,遇到的性能优化问题的定位和解决。概述:性能优化的原则——优化需要优化的部分。性能优化的一般步骤:首先,让你的程序跑起来结果一切正常。然后,运行这个结果正常的代码,看看它...

Python“三步”即可爬取,毋庸置疑

声明:本实例仅供学习,切忌遵守robots协议,请不要使用多线程等方式频繁访问网站。#第一步导入模块importreimportrequests#第二步获取你想爬取的网页地址,发送请求,获取网页内...

简单学Python——re库(正则表达式)2(split、findall、和sub)

1、split():分割字符串,返回列表语法:re.split('分隔符','目标字符串')例如:importrere.split(',','...

Lavazza拉瓦萨再度牵手上海大师赛

阅读此文前,麻烦您点击一下“关注”,方便您进行讨论和分享。Lavazza拉瓦萨再度牵手上海大师赛标题:2024上海大师赛:网球与咖啡的浪漫邂逅在2024年的上海劳力士大师赛上,拉瓦萨咖啡再次成为官...

ArkUI-X构建Android平台AAR及使用

本教程主要讲述如何利用ArkUI-XSDK完成AndroidAAR开发,实现基于ArkTS的声明式开发范式在android平台显示。包括:1.跨平台Library工程开发介绍...

Deepseek写歌详细教程(怎样用deepseek写歌功能)

以下为结合DeepSeek及相关工具实现AI写歌的详细教程,涵盖作词、作曲、演唱全流程:一、核心流程三步法1.AI生成歌词-打开DeepSeek(网页/APP/API),使用结构化提示词生成歌词:...

“AI说唱解说影视”走红,“零基础入行”靠谱吗?本报记者实测

“手里翻找冻鱼,精心的布局;老漠却不言语,脸上带笑意……”《狂飙》剧情被写成歌词,再配上“科目三”背景音乐的演唱,这段1分钟30秒的视频受到了无数网友的点赞。最近一段时间随着AI技术的发展,说唱解说影...

AI音乐制作神器揭秘!3款工具让你秒变高手

在音乐创作的领域里,每个人都有一颗想要成为大师的心。但是面对复杂的乐理知识和繁复的制作过程,许多人的热情被一点点消磨。...

取消回复欢迎 发表评论: