duplicated()
函数在 Pandas 库中用于检查 DataFrame 或 Series 中的重复项
以下是 duplicated()
函数的基本用法:
import pandas as pd
data = pd.Series(['A', 'B', 'A', 'C', 'B'])
duplicates = data.duplicated()
print(duplicates)
输出结果将会是:
0 False
1 False
2 True
3 False
4 True
dtype: bool
import pandas as pd
data = {'Column1': ['A', 'B', 'A', 'C', 'B'],
'Column2': [1, 2, 1, 3, 2]}
df = pd.DataFrame(data)
duplicates = df.duplicated()
print(duplicates)
输出结果将会是:
0 False
1 False
2 True
3 False
4 True
dtype: bool
你还可以使用 duplicated()
函数的参数来自定义重复项检测的行为。例如,你可以设置 keep
参数来指定保留哪个重复项。默认情况下,keep
参数设置为 'first'
,表示保留第一个出现的重复项,并将其他重复项标记为 True
。你还可以将 keep
设置为 'last'
,这样最后一个出现的重复项将被保留。此外,你还可以将 keep
设置为 False
,这样所有重复项都将被标记为 True
。
例如:
import pandas as pd
data = {'Column1': ['A', 'B', 'A', 'C', 'B'],
'Column2': [1, 2, 1, 3, 2]}
df = pd.DataFrame(data)
duplicates = df.duplicated(keep='last')
print(duplicates)
输出结果将会是:
0 True
1 True
2 False
3 False
4 False
dtype: bool