python实现Excel数据的探索和清洗
python实现Excel数据的探索和清洗
数据的探索和清洗
1、读取Excel文件的数据并转换为dataframe
#1.读取Excel文件的数据并转换为dataframe
file="d:/test/Summary/Data_Summary.xlsx"
data_raw=pd.read_excel(file,header=0,index_col=0)
#header设定为0：是为了使第1行的数据成为列的字段名
2、查看数据集的整体状态，了解基本特征列的情况
data_raw.head()
3、删除无效的数据列
remove_col=["序号"]
data_prep0=data_raw.drop(columns=remove_col,axis=1,inplace=None)
data_prep0.head()
4、查看数据集的整体信息，了解缺失值的分布情况
data_prep0.info()
5、检看数据集中缺失值的状态并删除缺失值
data_prep=data_prep0.dropna(subset=["产品"],axis=0)
data_prep.info()
6、检查数据集中重复值的状态并删除重复值
print("数据集中的重复值数量：",np.sum(data_prep.duplicated()))
#如果重复值的数量不为"0",则表示有重复值存在，可使用下列代码删除
#data_prep.drop_duplicates(keep="first",inplace=True)
以上就是Python实现Excel数据的探索和清洗，希望能对大家有所帮助。更多Python学习教程请关注IT培训机构:千锋教育。
猜你喜欢LIKE
相关推荐HOT
更多>>
pythonPexpect的工作流程
python中Pexpect的工作流程本文教程操作环境：windows7系统、Python3.9.1，DELLG3电脑。1、工作流程步骤(1)用spawn来执行一个程序;(2)用expect...详情>>
2023-11-08 23:50:45
python面向对象中类如何实现?
python面向对象中类如何实现?一、类的功能1、遵守变量命名的规范;2、大驼峰(有一个或者多个单词构成，每个单词首字母大写，单词跟单词直接相连)...详情>>
2023-11-08 22:49:52
python上下文管理器的用法详解
python上下文管理器的用法详解本文教程操作环境：windows7系统、Python3.9.1，DELLG3电脑。1、说明上下文管理器是一个包装任意代码块的对象。上...详情>>
2023-11-08 21:06:42
python中list与array有什么区别?
python中list与array有什么区别?在python数据类型中，list和array都可以根据索引来取其中的元素，但是list可以用append或者+来新增元素或者添加...详情>>
2023-11-08 20:34:31热门推荐
pythonPexpect的工作流程
沸python继承是什么?
热python面向对象中类如何实现?
热python实现Excel数据的探索和清洗
新python制表符添加空白有哪些方法?
python中如何使用@contextmanage?
python上下文管理器的用法详解
python中list与array有什么区别?
python中time.clock()的使用
python中Array和DataFrame如何相互转换
python的ndarray与pandas的series如何相互转换?
python os.listdir()解决乱码
python中numpy数组合并的两种方法
python中string和float之间的转换
技术干货
京公网安备 11010802030320号