这篇文章主要介绍了Python如何实现Excel数据的探索和清洗,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。
Python是一种跨平台的、具有解释性、编译性、互动性和面向对象的脚本语言,其最初的设计是用于编写自动化脚本,随着版本的不断更新和新功能的添加,常用于用于开发独立的项目和大型项目。
数据的探索和清洗
1、读取Excel文件的数据并转换为dataframe
# 1.读取Excel文件的数据并转换为dataframe file = "d:/test/Summary/Data_Summary.xlsx" data_raw = pd.read_excel(file, header=0, index_col=0) # header设定为0:是为了使第1行的数据成为列的字段名
2、查看数据集的整体状态,了解基本特征列的情况
data_raw.head()
3、删除无效的数据列
remove_col = ["序号"] data_prep0 = data_raw.drop(columns=remove_col, axis=1, inplace=None) data_prep0.head()
4、查看数据集的整体信息,了解缺失值的分布情况
data_prep0.info()
5、检看数据集中缺失值的状态并删除缺失值
data_prep = data_prep0.dropna(subset=["产品"], axis=0) data_prep.info()
6、检查数据集中重复值的状态并删除重复值
print("数据集中的重复值数量:", np.sum(data_prep.duplicated())) # 如果重复值的数量不为"0", 则表示有重复值存在,可使用下列代码删除 # data_prep.drop_duplicates(keep="first", inplace=True)
感谢你能够认真阅读完这篇文章,希望小编分享的“Python如何实现Excel数据的探索和清洗”这篇文章对大家有帮助,同时也希望大家多多支持亿速云,关注亿速云行业资讯频道,更多相关知识等着你来学习!
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。