百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程字典 > 正文

pandas数据合并之一文弄懂pd.concat()

toyiye 2024-07-04 09:14 13 浏览 0 评论


CDA数据分析师 出品

在工作中经常会遇到多个表进行拼接合并的需求,在pandas中有多个拼接合并的方法,每种方法都有自己擅长的拼接方式,这篇文章只对pd.concat()进行详细讲解,希望能帮助有需要的朋友一次彻底弄清楚它的用法。

pd.concat()函数简介

pd.concat()函数可以沿着指定的轴将多个dataframe或者series拼接到一起,这一点和另一个常用的pd.merge()函数不同,pd.merge()函数只能实现两个表的拼接。文章的主题是pd.concat()函数,接下来认识一下这个函数吧:

pd.concat( objs, axis=0, join='outer', join_axes=None, ignore_index=False, keys=None, levels=None, names=None, verify_integrity=False, sort=None, copy=True,)

以上是有关pd.concat()函数的所有参数,接下来通过例子对常用参数进行讲解。

参数axis

假设有两个来自不同部门的表格,一个来自销售部门,一个来自人力部门,这两个表一般会有一两个相同的列,大多数列名不同,但是行索引相同,因为是对同一批人不同信息的统计。

来看个例子:

来自销售部门的表df_s

来自人力部门的表df_h

通过上边的例子,能够看出在函数pd.concat()中的默认拼接方式是上下堆叠,而销售和人力的表格很明显需要左右拼接,这时候就需要参数axis出场了:

keys和names

当表格拼接完成后,就不能判断到底哪些数据是来自于哪一个表了,如果需要保留来源信息,就可以通过keys参数进行设置,而names参数可以给拼接后形成的数据结构添加名字。

来,看代码:

这是上下拼接情况下标记每条记录来自于哪个表,添加名字说明

这是左右拼接情况下标记每条记录来自于哪个表,添加名字说明

参数join和join_axes

前边的代码中对这两个参数都没有进行设置,其中join参数控制的是外连接还是内连接,默认外连接,保留两个表中的所有信息;如果设置成内连接,拼接结果只保留两个表共有的信息,而join_axes参数是在内连接时选择要完整保留哪个表的索引,但是这个参数在官方文档中提醒即将被弃用,所以不做详细讲解,只看一下join参数的表现吧:

这两个表有部分相同的列名和部分相同的行索引,来对这两个表进行两个方向的拼接,设置join="inner"后查看下效果:

上下拼接的时候,保留了共有的列信息!

左右拼接的时候保留了共有的行信息!

参数sort:

布尔值,默认值无

· 当" join"为" outer"时,如果有未对齐的轴,则对轴信息进行排序。 当前默认的排序默认值已弃用,在以后的pandas版本中将更改为不排序。

· 显式传递``sort = True''使警告和排序保持沉默。

· 显式传递``sort = False''以使警告静音而不进行排序。

· 当"join ='inner'"已经保留了非串联轴的顺序时,这个命令无效。

如下图,默认上下拼接,不进行sort参数设置会跳出警告,并且能看到列名已经被重新排序了:

设置sort=True,使警告沉默但是依然会被重新排序:

设置sort = False,使警告沉默并且不会被重新排序:

其他参数

levels:序列列表,默认值无。用于构建MultiIndex的特定级别(唯一值)。否则,它们将从键推断。

copy:bool,默认为True,如果为False,则不要不必要地复制数据。

这两个参数不是很常用,这里不多做介绍了。

希望通过这篇文章让你对pd.concat()函数有更深的认识,也希望你能够越来越优秀!

更多优质内容及精彩资讯,可点击【了解更多】迅速进入!

相关推荐

为何越来越多的编程语言使用JSON(为什么编程)

JSON是JavascriptObjectNotation的缩写,意思是Javascript对象表示法,是一种易于人类阅读和对编程友好的文本数据传递方法,是JavaScript语言规范定义的一个子...

何时在数据库中使用 JSON(数据库用json格式存储)

在本文中,您将了解何时应考虑将JSON数据类型添加到表中以及何时应避免使用它们。每天?分享?最新?软件?开发?,Devops,敏捷?,测试?以及?项目?管理?最新?,最热门?的?文章?,每天?花?...

MySQL 从零开始:05 数据类型(mysql数据类型有哪些,并举例)

前面的讲解中已经接触到了表的创建,表的创建是对字段的声明,比如:上述语句声明了字段的名称、类型、所占空间、默认值和是否可以为空等信息。其中的int、varchar、char和decimal都...

JSON对象花样进阶(json格式对象)

一、引言在现代Web开发中,JSON(JavaScriptObjectNotation)已经成为数据交换的标准格式。无论是从前端向后端发送数据,还是从后端接收数据,JSON都是不可或缺的一部分。...

深入理解 JSON 和 Form-data(json和formdata提交区别)

在讨论现代网络开发与API设计的语境下,理解客户端和服务器间如何有效且可靠地交换数据变得尤为关键。这里,特别值得关注的是两种主流数据格式:...

JSON 语法(json 语法 priority)

JSON语法是JavaScript语法的子集。JSON语法规则JSON语法是JavaScript对象表示法语法的子集。数据在名称/值对中数据由逗号分隔花括号保存对象方括号保存数组JS...

JSON语法详解(json的语法规则)

JSON语法规则JSON语法是JavaScript对象表示法语法的子集。数据在名称/值对中数据由逗号分隔大括号保存对象中括号保存数组注意:json的key是字符串,且必须是双引号,不能是单引号...

MySQL JSON数据类型操作(mysql的json)

概述mysql自5.7.8版本开始,就支持了json结构的数据存储和查询,这表明了mysql也在不断的学习和增加nosql数据库的有点。但mysql毕竟是关系型数据库,在处理json这种非结构化的数据...

JSON的数据模式(json数据格式示例)

像XML模式一样,JSON数据格式也有Schema,这是一个基于JSON格式的规范。JSON模式也以JSON格式编写。它用于验证JSON数据。JSON模式示例以下代码显示了基本的JSON模式。{"...

前端学习——JSON格式详解(后端json格式)

JSON(JavaScriptObjectNotation)是一种轻量级的数据交换格式。易于人阅读和编写。同时也易于机器解析和生成。它基于JavaScriptProgrammingLa...

什么是 JSON:详解 JSON 及其优势(什么叫json)

现在程序员还有谁不知道JSON吗?无论对于前端还是后端,JSON都是一种常见的数据格式。那么JSON到底是什么呢?JSON的定义...

PostgreSQL JSON 类型:处理结构化数据

PostgreSQL提供JSON类型,以存储结构化数据。JSON是一种开放的数据格式,可用于存储各种类型的值。什么是JSON类型?JSON类型表示JSON(JavaScriptO...

JavaScript:JSON、三种包装类(javascript 包)

JOSN:我们希望可以将一个对象在不同的语言中进行传递,以达到通信的目的,最佳方式就是将一个对象转换为字符串的形式JSON(JavaScriptObjectNotation)-JS的对象表示法...

Python数据分析 只要1分钟 教你玩转JSON 全程干货

Json简介:Json,全名JavaScriptObjectNotation,JSON(JavaScriptObjectNotation(记号、标记))是一种轻量级的数据交换格式。它基于J...

比较一下JSON与XML两种数据格式?(json和xml哪个好)

JSON(JavaScriptObjectNotation)和XML(eXtensibleMarkupLanguage)是在日常开发中比较常用的两种数据格式,它们主要的作用就是用来进行数据的传...

取消回复欢迎 发表评论:

请填写验证码