詳解pandas使用drop_duplicates去除DataFrame重復項參數(shù)
更新時間：2019年08月01日 11:12:45 作者：OraYang
這篇文章主要介紹了詳解pandas使用drop_duplicates去除DataFrame重復項參數(shù)，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧
Pandas之drop_duplicates：去除重復項
方法
DataFrame.drop_duplicates(subset=None, keep='first', inplace=False)
參數(shù)
這個drop_duplicate方法是對DataFrame格式的數(shù)據(jù)，去除特定列下面的重復行。返回DataFrame格式的數(shù)據(jù)。
- subset : column label or sequence of labels, optional 用來指定特定的列，默認所有列
- keep : {‘first', ‘last', False}, default ‘first' 刪除重復項并保留第一次出現(xiàn)的項
- inplace : boolean, default False 是直接在原來數(shù)據(jù)上修改還是保留一個副本
DataFrame中存在重復的行或者幾行中某幾列的值重復，這時候需要去掉重復行，示例如下：
data.drop_duplicates(subset=['A','B'],keep='first',inplace=True)
代碼中subset對應的值是列名，表示只考慮這兩列，將這兩列對應值相同的行進行去重。默認值為subset=None表示考慮所有列。
keep='first'表示保留第一次出現(xiàn)的重復行，是默認值。keep另外兩個取值為"last"和False，分別表示保留最后一次出現(xiàn)的重復行和去除所有重復行。
inplace=True表示直接在原來的DataFrame上刪除重復項，而默認值False表示生成一個副本。
將副本賦值給dataframe：
data=data.drop_duplicates(subset=None,keep='first',inplace=False)
這一行代碼與文章開頭提到的那行代碼效果等效，但是如果在該DataFrame上新增一列:
data['extra']=test_data['item_price_level']
就會報如下錯誤：
SettingWithCopyWarning: A value is trying to be set on a copy of a slice from a DataFrame.
所以如果想對DataFrame去重，最好采用開頭提到的那行代碼。
以上就是本文的全部內(nèi)容，希望對大家的學習有所幫助，也希望大家多多支持腳本之家。
您可能感興趣的文章:
相關文章
本文主要介紹了pandas讀取Excel批量轉換時間戳的實踐，文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨著小編來一起學習學習吧2023-02-02
這篇文章主要介紹了python實現(xiàn)有序遍歷dict(字典),具有很好的參考價值,希望對大家有所幫助,如有錯誤或未考慮完全的地方,望不吝賜教2023-08-08
這篇文章主要介紹了基于 django 實現(xiàn)的 webssh 簡單例子，小編覺得挺不錯的，現(xiàn)在分享給大家，也給大家做個參考。一起跟隨小編過來看看吧2018-07-07
在本篇內(nèi)容里小編給大家整理的是一篇關于python腳本第一行如何寫相關文章，有需要的朋友們可以參考下。2020-08-08
今天小編就為大家分享一篇python 計算一個字符串中所有數(shù)字的和實例，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-06-06
在工作中，我們經(jīng)常需要從命令行當中解析出指定的參數(shù)，而?Python?也提供了相應的標準庫來做這件事情，比如?sys,?optparse,?getopt,?argparse，這里面功能最強大的莫過于?argparse，下面就來看看它用法,需要的朋友可以參考下2022-12-12
python安裝包出現(xiàn)Retrying?(Retry(total=4,?connect=None,?read=No
這篇文章主要給大家介紹了關于python安裝包出現(xiàn)Retrying?(Retry(total=4,?connect=None,?read=None,?redirect=None,?status=None))問題的解決方法,需要的朋友可以參考下2022-09-09
今天小編就為大家分享一篇Python 最大概率法進行漢語切分的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12
本文總結了Python中from和import的使用方法,包括導入模塊和導入模塊中的對象,強調(diào)了模塊和對象的概念,并給出了具體的使用示例,最后,建議根據(jù)代碼維護性和團隊編碼風格來選擇合適的導入方式2025-03-03
今天小編就為大家分享一篇Python使用百度api做人臉對比的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2019-08-08