Pandas 合并多个Dataframe(merge,concat)的方法
作者：chixujohnny 发布时间：2021-07-14 07:26:58
标签：Pandas,Dataframe,merge,concat
在数据处理的时候，尤其在搞大数据竞赛的时候经常会遇到一个问题就是，多个表单的合并问题，比如一个表单有user_id和age这两个字段，另一个表单有user_id和sex这两个字段，要把这两个表合并成只有user_id、age、sex三个字段的表怎么办的，普通的拼接是做不到的，因为user_id每一行之间不是对应的，像拼积木似的横向拼接肯定是不行的。
pandas中有个merge函数可以做到这个实用的功能，merge这个词会点SQL语言的应该都不陌生。
下面说说merge函数怎么用：
df = pd.merge(df1, df2, how='left', on='user_id')
用法很简单，说一下后两个参数就可以了，how=""参数表示以哪个表的key为准，上面的how="left"表示以表df1为准，而key也就是on=""的参数
how="left"就是说，保留user_id字段的全部信息，不增加也不减少，但是拼接的时候只把df2表中的与df1中user_id字段交集的部分合并上就可以了，如果df2中出现了某个user_id在df1中没有出现，就抛弃掉这个样本不作处理。
如果要进行多key合并：
df = pd.merge(df1, df2, how='left', on=['user_id','sku_id'])
但是如果想仅进行简单的“拼接”而不是合并呢，要使用concat函数：
df = pd.concat( [df_user, dummies_sex, dummies_age, dummies_level], axis=1 )
这样可以保留这些表单的全部信息，参数axis=1表示列拼接，axis=0表示行拼接。
要保证背个表单的行数是相同的，并且每一行对应的key也是相同的，列拼接才变得有意义
来源：https://blog.csdn.net/chixujohnny/article/details/68059992
0
投稿猜你喜欢
- 脚本要实现的功能：输入instance id1：将所有的volume take snapshot2: 获取public ip 并
背景：做任务领金币的过程很无聊，而且每天都是重复同样的工作，非常符合自动化的定义；工具：python，appium，Android 手机（我- 学习要点：SQL之-建库、建表、建约束、关系SQL基本语句大全.txt举得起放得下叫举重，举得起放不下叫负重。头要有勇气，抬头要有底气。学习
- 递归查询对于同一个表父子关系的计算提供了很大的方便，这个示例使用了SQL server 2005中的递归查询,使用的表是CarParts，这
- 有助于效率的类型选择1、使你的数据尽可能小最基本的优化之一是使你的数据(和索引)在磁盘上(并且在内存中)占据的空间尽可能小。这能给出巨大的改
- 本文转自公众号："算法与编程之美"1、问题描述Python中数据类型有列表，元组，字典，队列，栈，树等等。像列表，元组这
- 介绍兄弟们，这个是正经的教程，不要拿来乱用，可以自己用自己的电脑或者手机试，但是别搞别人，懂的都懂！本文思路1.通过opencv调用摄像头拍
- concat 与其说是连接，更准确的说是拼接。就是把两个表直接合在一起。于是有一个突出的问题，是横向拼接还是纵向拼接，所以concat 函数
- 今天在我的Centos6.5机器上安装 Django 开发环境，在安装完使用 “django-admin.py startproject m
- 在Oracle SQL的where子句中传入字符类型参数'19-11月-08'，使得可以直接和日期类型比较，或者转换一下同日
- mysql设置某字段不能重复alter table novel.novelsort add unique(name);novel是数据库 n
- 一、同步原理基于Mysql的binlog日志订阅：binlog日志是Mysql用来记录数据实时的变化Mysql数据同步到ES中分为两种，分别
- 本文实例讲述了Python基于更相减损术实现求解最大公约数的方法。分享给大家供大家参考，具体如下：先从网上摘录一段算法的描述如下：更相减损法
- # -*- coding: utf-8 -*-"""Created on Sat Jun 20 19:36:3
- 直接po截图和代码下面是CheckFormDemo.html<!DOCTYPE html><html><hea
- string iconv ( string $in_charset , string $out_charset , string $str
- 本文实例为大家分享了python实现抖音视频批量下载的具体代码，供大家参考，具体内容如下这里就拿最近很火的抖音视频为例，利用API来实现用户
- 本文实例为大家分享了Python实现神经网络算法及应用的具体代码，供大家参考，具体内容如下首先用Python实现简单地神经网络算法：impo
- 1.导入模块import cv2 as cvimport numpy as np 2.OpenCV绘图大致步骤OpenCV 图形绘制步骤（1
- PYTHON首先要安装scapy模块PY3的安装scapy-python3，使用PIP安装就好了,注意,PY3无法使用pyinstaller
