1. 建立一个DataFrame C=pd.DataFrame({'a':['dog']*3+['fish']*3+['dog'],'b':[10,10,12,12,14,14,10]}) 2. 判断是否有重复项 用duplicated（ ）函数判断   C.duplicated() 3.  有重复项，则可以用drop_duplicates()移除重复项 C.drop_duplicates() 4. Duplicated（ ）和drop_duplicates（ ）方法是以默认的方式

python中的pandas模块中对重复数据去重步骤： 1）利用DataFrame中的duplicated方法返回一个布尔型的Series,显示各行是否有重复行，没有重复行显示为FALSE，有重复行显示为TRUE； 2）再利用DataFrame中的drop_duplicates方法用于返回一个移除了重复行的DataFrame。 注释： 如果duplicated方法和drop_duplicates方法中没有设置参数，则这两个方法默认会判断全部咧，如果在这两个方法中加入了指定的属性名（或者称为列名）

数据去重可以使用duplicated()和drop_duplicates()两个方法。 DataFrame.duplicated（subset = None，keep =‘first’ ）返回boolean Series表示重复行 参数：  subset：列标签或标签序列，可选 仅考虑用于标识重复项的某些列，默认情况下使用所有列 keep：{‘first’，‘last’，False}，默认’first’ first：标记重复，True除了第一次出现。 last：标记重复，True除了