najszybszy sposób Drop powielane Index w Pandy DataFrame

Jeśli chcesz usunąć indeks powielony w dataframe dodaje nie działa z oczywistych powodów:najszybszy sposób Drop powielane Index w Pandy DataFrame

myDF.drop_duplicates(cols=index)

myDF.drop_duplicates(cols='index')

szuka kolumna o nazwie „index”

Jeśli chcesz usunąć indeks mam zrobić:

myDF['index'] = myDF.index 
myDF= myDF.drop_duplicates(cols='index') 
myDF.set_index = myDF['index'] 
myDF= myDF.drop('index', axis =1)

Czy istnieje skuteczniejszy sposób?

Źródło

2014-04-07 RukTech

http://stackoverflow.com/questions/13035764/remove-rows-with-duplicate-indices-pandas-dataframe-and- timeseries –

@PaulH: Odpowiedź na twoje pytanie od Luciano jest taka sama jak moje pytanie tylko w jednej linii – RukTech

prostu: DF.groupby(DF.index).first()

Źródło

2014-04-07 17:02:57

Podoba mi się ta metoda. Dziękuję Ci! @CT – RukTech

@CT Zhu - Jeśli użyję tej metody, to łączę mój wątek z kolumną w jedną kolumnę. Nie chcę, żeby to się zdarzyło. Czy jest jakiś sposób obejścia tego? – liv2hak

@ liv2hak, umysł zadać nowe pytanie z minimalnym przykładem zbioru danych? –

Można użyć numpy.unique uzyskać indeks unikatowych wartości i używać iloc aby te indeksy:

>>> df 
     val 
A 0.021372 
B 1.229482 
D -1.571025 
D -0.110083 
C 0.547076 
B -0.824754 
A -1.378705 
B -0.234095 
C -1.559653 
B -0.531421 

[10 rows x 1 columns] 

>>> idx = np.unique(df.index, return_index=True)[1] 
>>> df.iloc[idx] 
     val 
A 0.021372 
B 1.229482 
C 0.547076 
D -1.571025 

[4 rows x 1 columns]

Źródło

2014-04-07 16:52:24

To jest DUŻO szybsze ..... jeszcze szybciej, jeśli używasz df.ix [idx] – baconwichsand

do „powielona” metoda działa dla dataframes i serii. Wystarczy wybrać się na tych wierszy, które nie są oznaczone jako mające duplikatu indeksu:

df[~df.index.duplicated()]

Źródło

2015-10-28 09:31:17 danielstn

Spowoduje to jednak usunięcie wszystkich duplikatów? –

Zauważ, że jest to najszybsza metoda w testowanych przeze mnie przypadkach testowych: http://stackoverflow.com/questions/13035764/remove-rows-with-duplicate-indices-pandas-dataframe-and-timeseries/34297689#34297689 Możesz również odtworzyć zachowanie zaakceptowanej odpowiedzi dokładnie używając: 'df [~ df.index.duplicated (keep = 'first)]' – n8yoder

najszybszy sposób Drop powielane Index w Pandy DataFrame

Odpowiedz

Powiązane problemy