Pandas DataFrame Groupрозподіляє два стовпці та отримує підрахунок


166

У мене є кадр даних панди у такому форматі:

df = pd.DataFrame([[1.1, 1.1, 1.1, 2.6, 2.5, 3.4,2.6,2.6,3.4,3.4,2.6,1.1,1.1,3.3], list('AAABBBBABCBDDD'), [1.1, 1.7, 2.5, 2.6, 3.3, 3.8,4.0,4.2,4.3,4.5,4.6,4.7,4.7,4.8], ['x/y/z','x/y','x/y/z/n','x/u','x','x/u/v','x/y/z','x','x/u/v/b','-','x/y','x/y/z','x','x/u/v/w'],['1','3','3','2','4','2','5','3','6','3','5','1','1','1']]).T
df.columns = ['col1','col2','col3','col4','col5']

df:

   col1 col2 col3     col4 col5
0   1.1    A  1.1    x/y/z    1
1   1.1    A  1.7      x/y    3
2   1.1    A  2.5  x/y/z/n    3
3   2.6    B  2.6      x/u    2
4   2.5    B  3.3        x    4
5   3.4    B  3.8    x/u/v    2
6   2.6    B    4    x/y/z    5
7   2.6    A  4.2        x    3
8   3.4    B  4.3  x/u/v/b    6
9   3.4    C  4.5        -    3
10  2.6    B  4.6      x/y    5
11  1.1    D  4.7    x/y/z    1
12  1.1    D  4.7        x    1
13  3.3    D  4.8  x/u/v/w    1

Тепер я хочу згрупувати це за двома стовпцями, як:

df.groupby(['col5','col2']).reset_index()

Вихід:

             index col1 col2 col3     col4 col5
col5 col2                                      
1    A    0      0  1.1    A  1.1    x/y/z    1
     D    0     11  1.1    D  4.7    x/y/z    1
          1     12  1.1    D  4.7        x    1
          2     13  3.3    D  4.8  x/u/v/w    1
2    B    0      3  2.6    B  2.6      x/u    2
          1      5  3.4    B  3.8    x/u/v    2
3    A    0      1  1.1    A  1.7      x/y    3
          1      2  1.1    A  2.5  x/y/z/n    3
          2      7  2.6    A  4.2        x    3
     C    0      9  3.4    C  4.5        -    3
4    B    0      4  2.5    B  3.3        x    4
5    B    0      6  2.6    B    4    x/y/z    5
          1     10  2.6    B  4.6      x/y    5
6    B    0      8  3.4    B  4.3  x/u/v/b    6

Я хочу отримати підрахунок кожного ряду, як наступний. Очікуваний вихід:

col5 col2 count
1    A      1
     D      3
2    B      2
etc...

Як отримати очікуваний результат? І я хочу знайти найбільшу кількість для кожного значення "col2"?


Дуже подібне питання щойно виникло вчора .. дивіться тут .
bdiamante

Примітка щодо продуктивності, включаючи альтернативи: Pandas groupby.size vs series.value_counts vs collection.Counter з кількома серіями
jpp

Відповіді:


116

Після відповіді @ Енді, ви можете зробити наступне, щоб вирішити своє друге питання:

In [56]: df.groupby(['col5','col2']).size().reset_index().groupby('col2')[[0]].max()
Out[56]: 
      0
col2   
A     3
B     2
C     1
D     3

1
Чи можу я отримати значення "col5" для цього, як C ... 1 ... 3?
Нілані Алгіріяге

141

Ви шукаєте size:

In [11]: df.groupby(['col5', 'col2']).size()
Out[11]:
col5  col2
1     A       1
      D       3
2     B       2
3     A       3
      C       1
4     B       1
5     B       2
6     B       1
dtype: int64

Отримати таку ж відповідь, що і очікування ("друге питання"), але трохи чіткіше, це згрупувати за рівнем:

In [12]: df.groupby(['col5', 'col2']).size().groupby(level=1).max()
Out[12]:
col2
A       3
B       2
C       1
D       3
dtype: int64

1
Я не знаю Чому я забув це: О, у будь-якому випадку, що стосується мого другого питання? Знайдіть найбільший підрахунок для кожного значення "col2" і отримайте відповідне значення "col5"?
Нілані Алгіріяге

23

Вставлення даних у кадр даних панди та надання імені стовпця .

import pandas as pd
df = pd.DataFrame([['A','C','A','B','C','A','B','B','A','A'], ['ONE','TWO','ONE','ONE','ONE','TWO','ONE','TWO','ONE','THREE']]).T
df.columns = [['Alphabet','Words']]
print(df)   #printing dataframe.

Це наші друковані дані:

введіть тут опис зображення

Щоб створити групу фреймів даних у пандах та лічильниках ,
Вам потрібно надати ще один стовпець, який рахує групування, назвемо цей стовпець як "COUNTER" у фреймі даних .

Подобається це:

df['COUNTER'] =1       #initially, set that counter to 1.
group_data = df.groupby(['Alphabet','Words'])['COUNTER'].sum() #sum function
print(group_data)

ВИХІД:

введіть тут опис зображення


9
Як я можу змусити стовпець "Алфавіт" (наприклад, A) повторитись нижче і не залишати прогалини в першому стовпці ??
блаженство

як отримати доступ до значення кожної групи, яка підсумовується за алфавітом та словом?
Рахул Гоял

21

Ідіоматичне рішення, яке використовує лише одну групу

(df.groupby(['col5', 'col2']).size() 
   .sort_values(ascending=False) 
   .reset_index(name='count') 
   .drop_duplicates(subset='col2'))

  col5 col2  count
0    3    A      3
1    1    D      3
2    5    B      2
6    3    C      1

Пояснення

Результатом sizeметоду groupby є серія з col5та col2в індексі. Звідси ви можете скористатися іншим методом groupby, щоб знайти максимальне значення кожного значення, col2але цього робити не обов’язково. Ви можете просто сортувати всі значення по спадаючій , а потім зберегти тільки рядки з першим входженням col2з drop_duplicatesметодом.


Там немає парів називається nameв reset_index()в поточній версії панд: pandas.pydata.org/pandas-docs/stable/generated / ...
mmBs


Гаразд, моя погана. Я використовував його при роботі з DataFrameНЕ Series. Дякуємо за посилання
ммБа

2

Якщо ви хочете додати новий стовпець (скажімо, 'count_column'), що містить підрахунки груп у кадр даних:

df.count_column=df.groupby(['col5','col2']).col5.transform('count')

(Я вибрав "col5", оскільки він не містить нан)


-2

Ви можете просто використовувати вбудований підрахунок функцій, наступний за функцією groupby

df.groupby(['col5','col2']).count()
Використовуючи наш веб-сайт, ви визнаєте, що прочитали та зрозуміли наші Політику щодо файлів cookie та Політику конфіденційності.
Licensed under cc by-sa 3.0 with attribution required.