基于两列删除熊猫数据框中的重复项

原文:https://www . geesforgeks . org/delete-熊猫中的重复-基于数据框的两列/

数据框是一种二维的、大小可变的表格数据结构，带有标记的轴(行和列)。它可以包含重复的条目，删除它们有几种方法。

让我们考虑以下数据集。

dataframe 在 order_id 和 customer_id 列中包含重复值。以下是基于两列从数据框中删除重复值的方法。

方法 1:使用 drop_duplicates()

进场:

  • 我们将基于两列删除重复的列
  • 让这些列为“订单 id”和“客户 id”
  • 仅保留最新条目
  • 重置数据帧的索引

下面是上述方法的 python 代码。

Python 3

# import pandas library
import pandas as pd

# load data
df1 = pd.read_csv("super.csv")

# drop rows which have same order_id
# and customer_id and keep latest entry
newdf = df1.drop_duplicates(
  subset = ['order_id', 'customer_id'],
  keep = 'last').reset_index(drop = True)

# print latest dataframe
display(newdf)

输出:

方法二:使用 groupby()

进场:

  • 我们将根据两列对行进行分组
  • 让这些列为“订单 id”和“客户 id”
  • 只保留第一个条目

下面给出了上述方法的 python 代码。

Python 3

# import pandas library
import pandas as pd

# read data
df1 = pd.read_csv("super.csv")

# group data over columns 'order_id'
# and 'customer_id' and keep first entry only
newdf1 = df1.groupby(['order_id', 'customer_id']).first()

# print new dataframe
print(newdf1)

输出:

版权属于：月萌API www.moonapi.com，转载请注明出处

本文链接：https://moonapi.com/news/14560.html