python - 在 pandas 数据框中选择独特的观察值

Question

我有一个pandas带有列的数据框uniqueid。我想根据此列从数据框中删除所有重复项，以便所有剩余的观察结果都是唯一的。

Answer 1

还有drop_duplicates()适用于任何数据框的方法（此处的文档）。您可以将要删除的特定列作为参数传递。

df.drop_duplicates(subset='uniqueid', inplace=True)

Answer 2

使用duplicated方法

由于我们只关心uniqueid（A在我的示例中）是否重复，因此选择它并调用duplicated该系列。然后使用~翻转布尔值。

In [90]: df = pd.DataFrame({'A': ['a', 'b', 'b', 'c'], 'B': [1, 2, 3, 4]})

In [91]: df
Out[91]: 
   A  B
0  a  1
1  b  2
2  b  3
3  c  4

In [92]: df['A'].duplicated()
Out[92]: 
0    False
1    False
2     True
3    False
Name: A, dtype: bool

In [93]: df.loc[~df['A'].duplicated()]
Out[93]: 
   A  B
0  a  1
1  b  2
3  c  4