百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

Pandas处理Excel之合并表格的方法

ztj100 2025-02-18 14:24 35 浏览 0 评论

当在数据分析或数据处理过程中,可能需要合并表格以获得更完整的信息或更好的洞察。在Pandas库中,concat()和merge()是两个常用的函数,用于将多个数据帧(DataFrame)或序列(Series)组合在一起。它们的主要区别在于它们的用途和合并方式。

concate:函数是用于拼接两个或多个DataFrame或Series对象沿着行或列的方向。这个函数可以用于简单的数据拼接,也可以用于复杂的数据处理任务。

Bash
df = pd.concat(objs, axis=0, join='outer', ignore_index=False, 
        keys=None, levels=None, names=None, verify_integrity=False, 
        sort=None, copy=True) 

(1)objs:对象,一般为df或者series

(2)axis:拼接方向,默认为0,行拼接,若axis=1,则为列拼接

(3)join:默认为outer表示并集,inner表示交集, left/right表示左右连接

(4)ignore_index=True:重建索引

(5)keys:创建层次化索引

(a)两张表列数一致,只是需要将行数简单拼接时:pd.concat([df1,df2]),效果df1.append(df2)。

(b)两张表行数一致,只需要列简单拼接时:pd.concate([df1,df2],axis=1),效果pd.merge(df1,df2,left_index=True,right_index=True,how=‘outer’)。

(c)两张表按行拼接,只想保留列索引相同的列,则how=‘inner’。

(d)两张表按列拼接,只想保留行索引相同的行,则how=‘inner’。

下面是一些concat()函数的使用示例和总结:

  1. 沿着行方向拼接DataFrame

如果想要沿着行方向将两个DataFrame对象拼接在一起,可以使用concat()函数,如下所示:

Bash
import pandas as pd  
  
df1 = pd.DataFrame({'A': [1, 2], 'B': [3, 4]})  
df2 = pd.DataFrame({'A': [5, 6], 'B': [7, 8]})  
concated_df = pd.concat([df1, df2])  
print(concated_df)

这将会在两个DataFrame之间进行行拼接,输出的结果如下:

    A  B  
0  1  3  
1  2  4  
0  5  7  
1  6  8
  1. 沿着列方向拼接DataFrame

如果想要沿着列方向将两个DataFrame对象拼接在一起,可以通过设置axis=1来实现,如下所示:

import pandas as pd  
  
df1 = pd.DataFrame({'A': [1, 2], 'B': [3, 4]})  
df2 = pd.DataFrame({'A': [5, 6], 'B': [7, 8]})  
concated_df = pd.concat([df1, df2], axis=1)  
print(concated_df)

这将会在两个DataFrame之间进行列拼接,输出的结果如下:

    A  B  A  B  
0  1  3  5  7  
1  2  4  6  8
  1. 使用 ignore_index 参数更改索引

如果想要在拼接之后更改DataFrame的索引,可以使用ignore_index参数,如下所示:

import pandas as pd  
  
df1 = pd.DataFrame({'A': [1, 2], 'B': [3, 4]})  
df2 = pd.DataFrame({'A': [5, 6], 'B': [7, 8]})  
concated_df = pd.concat([df1, df2], ignore_index=True)  
print(concated_df)

这将会在拼接之后重设DataFrame的索引,输出的结果如下:

   A  B
0  1  3
1  2  4
2  5  7
3  6  8

merge:merge()函数来合并两个表格。merge()函数的基本语法如下:

merge(left, right, how='inner', on=None, 
      left_on=None, right_on=None, 
      left_index=False, right_index=False, 
      sort=True, suffixes=('_x', '_y'), copy=True, 
      indicator=False, 
      validate=None)

(1)left和right分别表示要合并的左右两个表格;

(2)how参数指定合并方式,包括内连接(inner)、左连接(left)、右连接(right)和外连接(outer);

(3)on参数指定用于合并的列名;left_on和right_on参数分别指定左右两个表格中用于合并的列名;

(4)left_index和right_index参数指定是否使用索引列进行合并;

(5)sort参数指定是否排序结果表格;

(6)suffixes参数指定左右两个表格重叠列名的后缀;

(7)copy参数指定是否复制原始数据;

(8)indicator参数指定是否添加指示符列;

(9)validate参数指定是否验证合并结果。

下面的例子将会详细说明如何使用:

首先,我们创建两个简单的DataFrame:

import pandas as pd  
  
# 创建第一个DataFrame  
df1 = pd.DataFrame({  
    'A': ['A0', 'A1', 'A2', 'A3'],  
    'B': ['B0', 'B1', 'B2', 'B3'],  
    'key': ['K0', 'K1', 'K0', 'K1']  
})  
  
# 创建第二个DataFrame  
df2 = pd.DataFrame({  
    'key': ['K0', 'K1'],  
    'C': ['C0', 'C1']  
})

默认情况下,merge()函数执行的是内连接(inner join):

merged = pd.merge(df1, df2, on='key')  
print(merged)

结果:

      A   B key   C  
0  A0  B0  K0  C0  
1  A1  B1  K1  C1  
2  A2  B2  K0  C0  
3  A3  B3  K1  C1

如果我们想执行左连接或右连接,我们可以设置how参数:

左连接:

merged = pd.merge(df1, df2, on='key', how='left')  
print(merged)

右连接:

merged = pd.merge(df1, df2, on='key', how='right')  
print(merged)

如果我们想根据多个键进行合并,我们可以传入一个键的列表给on参数:

merged = pd.merge(df1, df2, on=['key1', 'key2'])  
print(merged)

总结一下,concat()函数用于将多个数据帧或序列按照行或列的方向进行简单的拼接,而merge()函数用于将两个数据帧按照指定的列或索引进行合并。concat()函数保留所有输入对象的索引或列名,而merge()函数会根据合并的键连接行,并可能添加新的列来存储来自两个数据帧的值。

相关推荐

Java网络编程(JAVA网络编程技术)

网络编程三要素1.IP地址:表示设备在网络中的地址,是网络中设备的唯一标识2.端口号:应用程序在设备中唯一的标识3.协议:连接和数据在网络中传输的规则。InetAddress类Java中也有一个...

字节Java全能手册火了!多线程/网络/性能调优/框架啥都有

前言在这个技术不断更新的年代,跟不上时代变化的速度就会被刷掉,特别是咱们程序员这一群体,技术不断更新的同时也要同时进步,不然长江后浪推前浪,前浪......一个程序员从一个什么都不懂的小白在学到有一定...

一分钟了解java网络编程(java基础网络编程)

一、OSI七层网络模型应用层:Http协议、电子邮件传输、文件服务器等;表示层:数据转换,解决不同系统的兼容问题(跨语言);会话层:建立与应用程序的会话连接;传输层:提供了端口号和传输协议(TPC/U...

Java编程-高并发情况下接口性能优化实践-提升吞吐量TPS

记得前段时间工作中接到一个任务是优化一个下单接口的性能提高接口的吞吐量TPS,前期通过arthas工具跟踪接口的具体方法调用链路及耗时,发现了影响此接口的性能瓶颈主要是加锁的方式,后来变更了锁的方式...

socket 断线重连和心跳机制如何实现?

一、socket概念1.套接字(socket)是网络通信的基石,是支持TCP/IP协议的网络通信的基本操作单元。它是网络通信过程中端点的抽象表示,包含进行网络通信必须的五种信息:连接使用的协议,...

迅速了解-Java网络编程(java基础网络编程)

Java网络编程在JavaSE阶段,我们学习了I/O流,既然I/O流如此强大,那么能否跨越不同的主机进行I/O操作呢?这就要提到Java的网络编程了。...

Java网络编程详解(java 网络编程)

网络编程基础知识最!最!最!重要网络编程基础概念网络编程不等于网站编程,网络编程即使用套接字(socket)来达到各进程间的通信,现在一般称为TCP/IP编程;网络编程分为服务端和客户端。服务端就相当...

「开源推荐」高性能网络通信框架 HP-Socket v5.7.2

简介HP-Socket是一套通用的高性能TCP/UDP/HTTP通信框架,包含服务端组件、客户端组件和Agent组件,广泛适用于各种不同应用场景的TCP/UDP/HTTP通信系统,提供C/...

Java网络编程从入门到精通:打造属于你的网络世界

Java网络编程从入门到精通:打造属于你的网络世界在当今这个信息爆炸的时代,网络编程已经成为程序员必不可少的一项技能。而Java作为一种功能强大且广泛使用的编程语言,在网络编程领域也有着举足轻重的地位...

5分钟读懂C#中TcpClient、TcpListener和Socket三个类的角色

一、核心功能与定位1.Socket类:底层通信的基石-位于System.Net.Sockets命名空间,提供对网络协议栈的直接操作,支持TCP、UDP等多种协议。-手动管理连接细节:需...

(三)谈谈 IO 模型(Socket 编程篇)

快过年啦,估计很多朋友已在摸鱼的路上。而我为了兄弟们年后的追逐,却在苦苦寻觅、规划,导致文章更新晚了些,各位猿粉谅解。上期分享,我们结合新春送祝福的场景,通过一坨坨的代码让BIO、NIO编程过程呈...

大数据编程入门:Java网络编程(大数据 编程)

如果想要编写出一个可以运行在多个设备上的程序,应该怎么做呢?答案是网络编程,今天小编将为大家带来大数据编程入门:Java网络编程。一、网络编程概念网络编程是指编写在通过网络连接的多个设备(计算机)上运...

基于JAVA的社交聊天室(java聊天设计与实现)

基于Java的社交聊天室一、前言随着互联网技术的迅速发展,实时通信和在线社交已成为人们日常生活的重要组成部分。基于Java的社交聊天室系统,凭借其跨平台、高性能和安全性等特点,为用户提供了一个集中、开...

java-socket长连接demo体验(java socket长连接)

作者:DavidDing来源:https://zhuanlan.zhihu.com/p/56135195一、前言最近公司在预研设备app端与服务端的交互方案,主要方案有:服务端和app端通过阿里i...

JAVA数据库编程(java数据库编程指南)

预计更新###第一节:什么是JAVA-JAVA的背景和历史-JAVA的特点和应用领域-如何安装和配置JAVA开发环境###第二节:JAVA基础语法-JAVA的基本数据类型和变量-运算符和...

取消回复欢迎 发表评论: