pandas excel合并去重

忘是亡心i 2022-12-29 14:12 196阅读 0赞

# 一、概述 #

现有一个excel文件examples.xlsx，内容如下：

![272b860fce33377ec3d4f743187573ab.png][]

合并去重后，效果如下：

![9c0b04172e56e88226b003ac05fc834e.png][]

那么需求如下：

公司去重，保留一个
    
    多个地区合并为一行，用逗号隔开
    
    收入进行累计计算

最后将统计结果，保存到新的excel中。

# 二、演示 #

完整代码如下：

# ！/usr/bin/python3
    # -*- coding: utf-8 -*-
    
    import pandas as pd
    
    def computer(x):  # 数据计算
        return pd.Series({
            # 去重
            '公司': ','.join(x['公司'].unique()),
            '地区':
                ','.join(list(set((','.join(x['地区']).split(','))))),
            '收入': sum(x['收入']),
        })
    
    # 读取原始数据excel
    _df = pd.read_excel('examples.xlsx', sheet_name='Sheet1')
    # 使用groupby进行分组
    res = _df[['公司', '地区', '收入']].groupby(['公司'], as_index=False).apply(computer).reset_index()
    # 保存到新的excel中
    res.to_excel('数据汇总.xlsx', index=False, header=True, encoding='gbk', sheet_name='Sheet1')

执行代码，它会生成一个文件据汇总.xlsx

打开它，效果如下：

![1f72c87823fad9cd7356605da27dc9dc.png][]

[272b860fce33377ec3d4f743187573ab.png]: /images/20221120/f1fdddbc88a54286b7cfa82d1cbe8c22.png
[9c0b04172e56e88226b003ac05fc834e.png]: /images/20221120/4ea94f160bbd4648af7c2f182898c037.png
[1f72c87823fad9cd7356605da27dc9dc.png]: /images/20221120/200e7e970645438e832e9b7b31df770b.png

发表评论取消回复

表情：

评论列表（有 0 条评论，196人围观）

还没有评论，来说两句吧...

相关阅读

相关【算法】数组合并去重算法

文章目录删除有序数组重复项删除特定值有序数组合并链表去重合并算法删除有序数组重复项由于数组是有序的，因此只要判断当前数组元素是

Myth丶恋晨/ 2024年03月29日 15:45/ 0 赞/ 73 阅读

相关 pandas 7、合并、连接、去重、替换

![1598479-20190917170221974-354492413.png][] ![1598479-20190917170226551-189013207.

灰太狼/ 2023年08月17日 16:07/ 0 赞/ 110 阅读

相关使用pandas拆分合并excel文件

import pandas as pd import os df_source = pd.read_excel( "./pan

- 日理万妓/ 2023年02月26日 02:19/ 0 赞/ 185 阅读

相关 pandas 索引去重_Pandas入门 (一)

一、什么是Pandas? 一个开源的Python类库:用于数据分析、数据处理、数据可视化 ●高性能 ●容易使用的数据结构 ●容易使用的数据分析工具很方便和其它类库一

我会带着你远行/ 2023年01月09日 03:40/ 0 赞/ 153 阅读

相关 pandas excel合并去重

一、概述现有一个excel文件examples.xlsx，内容如下： ![272b860fce33377ec3d4f743187573ab.png][] 合并去重后

忘是亡心i/ 2022年12月29日 14:12/ 0 赞/ 197 阅读

相关 javascript两个数组去重合并

十、利用Map数据结构去重（转载地址还要其他方法） function arrayNonRepeatfy(arr) { let map = new Ma

分手后的思念是犯贱/ 2022年10月13日 14:54/ 0 赞/ 178 阅读

相关 thinkphp导入Excel去重

/导入Excel有两种可能 1.导入的Excel本身就有重复项 2.导入的Excel数据和已有的数据库信息有重复项解决思路：

柔光的暖阳◎/ 2022年06月15日 05:47/ 0 赞/ 293 阅读

相关 MapReduce编程文件合并和去重

、问题描述 > 对输入的多个文件进行合并，并剔除其中重复的内容，去重后的内容输出到一个文件中。 file1.txt中的内容: 20150101 x

喜欢ヅ旅行/ 2022年05月26日 09:51/ 0 赞/ 182 阅读

相关 python使用pandas模块实现字符串处理去重排序excel生成

最近学习python，用python实现一个小需求,最后写入excel使用到pandas模块：某中学学生在500米短跑训练比赛中的数据，体育老师把学生成绩结果记录在

小灰灰/ 2022年04月17日 06:28/ 0 赞/ 300 阅读

相关 vue对象数组去重合并

需求分析对象数组合并去重有两个对象数组如： \` var array1=\[ \{ no: 4, station\_name: “兴发路4”,

小灰灰/ 2021年12月04日 00:19/ 0 赞/ 1296 阅读