Pandas重复值处理

「爱情、让人受尽委屈。」 2023-08-17 16:32 81阅读 0赞

import pandas as pd
    
    #生成数据
    data1,data2,data3,data4=['a',3],['b',2],['a',3],['c',2]
    df=pd.DataFrame([data1,data2,data3,data4],columns=['col1','col2'])
    print(df)
      col1  col2
    0    a     3
    1    b     2
    2    a     3
    3    c     2
    
    #判断数据
    isDuplicated=df.duplicated() #判断重复数据记录
    print(isDuplicated)
    0    False
    1    False
    2     True
    3    False
    dtype: bool
    
    #删除重复的数据
    print(df.drop_duplicates()) #删除所有列值相同的记录，index为2的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    3    c     2
    
    print(df.drop_duplicates(['col1'])) #删除col1列值相同的记录，index为2的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    3    c     2
    
    print(df.drop_duplicates(['col2'])) #删除col2列值相同的记录，index为2和3的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    
    print(df.drop_duplicates(['col1','col2'])) #删除指定列（col1和col2）值相同的记录，index为2的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    3    c     2

转载于:https://www.cnblogs.com/hankleo/p/11462532.html

发表评论取消回复

表情：

评论列表（有 0 条评论，81人围观）

还没有评论，来说两句吧...

相关阅读

相关 Pandas数据处理：空值填充案例

在Pandas中，处理空值（NaN）是非常常见的。以下是一个具体的空值填充案例：假设我们有一个关于销售数据的Pandas DataFrame `df`： ```pytho

心已赠人/ 2025年01月08日 12:09/ 0 赞/ 5 阅读

相关使用Pandas进行数据处理：处理缺失值、重复项等问题？

在Python的Pandas库中，对数据处理包括填充缺失值、删除重复项等。以下是详细的步骤： 1. **填充缺失值**： ```python import pan

心已赠人/ 2024年12月31日 05:30/ 0 赞/ 11 阅读

相关利用Pandas进行数据清洗：空值、重复项和异常值处理

在Python中，Pandas库是非常强大的工具，用于数据清洗。以下是处理空值（NaN）、重复项以及异常值的步骤： 1. **检查缺失值**： ```python impor

约定不等于承诺〃/ 2024年12月28日 16:21/ 0 赞/ 14 阅读

相关 Pandas缺失值处理

导入库 import pandas as pd import numpy as np from sklearn.preprocessing im

谁借莪１个温暖的怀抱￠/ 2023年08月17日 16:32/ 0 赞/ 153 阅读

相关 Pandas异常值处理

import pandas as pd 生成异常数据 df=pd.DataFrame({'col1':[1,120,3,5,2,12,13],

爱被打了一巴掌/ 2023年08月17日 16:32/ 0 赞/ 74 阅读

相关 Pandas重复值处理

import pandas as pd 生成数据 data1,data2,data3,data4=['a',3],['b',2],['a',3

「爱情、让人受尽委屈。」/ 2023年08月17日 16:32/ 0 赞/ 82 阅读

相关【Pandas】检查是否有空值、处理空值

1.创建有空值的DataFrame import numpy as np import pandas as pd dates = pd.

深藏阁楼爱情的钟/ 2023年07月12日 11:39/ 0 赞/ 5 阅读

相关 Pandas 处理DataFrame中的inf值

在用DataFrame计算变化率时，例如(今天-昨天) / 昨天恰好为(2-0) / 0时，这些结果数据会变为inf。为了方便后续处理，可以利用numpy，将这些inf值进

Myth丶恋晨/ 2023年06月14日 04:27/ 0 赞/ 35 阅读

相关 pandas去除重复值drop_duplicates问题

win10电脑环境下运行代码如下： \ 重复值处理 import pandas as pd \ 导入pandas库 \ 生成重复数据 data1 = \

雨点打透心脏的1/2处/ 2022年05月22日 04:05/ 0 赞/ 198 阅读

相关 pandas统计重复值次数

pandas统计数据项重复值次数和删除 from pandas import DataFrame df = DataFram

忘是亡心i/ 2022年05月21日 01:40/ 0 赞/ 463 阅读