pandas中DataFrame中删除重复值的两种用法
1、duplicated方法去判断是否重复:
DataFrame的duplicated方法返回的是一个布尔值Series,这个Series反映的是每一行是否存在重复情况:
2、 drop_duplicate方法去查看重复行里面的值
drop_duplicates返回的是DataFrame,内容是duplicated返回数组中为False的部分:
若想查看duplicated和drop_duplicates观测到的值则需要在duplicated和drop_duplicates中添加字典的键:
但是duplicated和drop_duplicates默认都是保留第一个观测到的值。所以我们需要引用当中的keep参数keep=‘last’去返回到最后一个数: