温馨提示×

python怎么删除csv中重复的数据

小亿
280
2023-11-29 13:47:27
栏目: 编程语言
Python开发者专用服务器限时活动,0元免费领,库存有限,领完即止! 点击查看>>

你可以使用pandas库来操作和处理csv文件,删除重复数据的方法如下:

首先,导入pandas库:

import pandas as pd

然后,使用read_csv()函数读取csv文件并将其保存为一个DataFrame对象:

df = pd.read_csv("data.csv")

接下来,使用drop_duplicates()函数删除重复的数据行:

df.drop_duplicates(inplace=True)

最后,将处理后的数据保存为新的csv文件:

df.to_csv("new_data.csv", index=False)

完整的代码如下所示:

import pandas as pd

df = pd.read_csv("data.csv")
df.drop_duplicates(inplace=True)
df.to_csv("new_data.csv", index=False)

这样就可以删除csv文件中的重复数据了。

亿速云「云服务器」,即开即用、新一代英特尔至强铂金CPU、三副本存储NVMe SSD云盘,价格低至29元/月。点击查看>>

推荐阅读:python中csv删除列的方法是什么

0