Pandas возвращает другой результат, используя fillna () с sum () в более крупных версиях, чем 0.21.0

Question

Проходя Вопрос по SO и моделируя ответ, я обнаружил странное поведение между версиями Pandas 0.21.0

. При использовании fillna вместе с sum() для столбцов все работает как нужно. Однако,это приводит к 0.0 выше версии 0.21.0.

Структура DataFrame:

>>> df = pd.DataFrame({'PlaceTest':[21,21,22,22], 'Approved':[1,0,1,0]})
>>> df
   PlaceTest  Approved
0         21         1
1         21         0
2         22         1
3         22         0

Создание нового столбца с groupby при использовании sum() ..

>>> df['Not Approved'] = df.groupby('PlaceTest')['Approved'].sum()
>>> df
   PlaceTest  Approved  Not Approved
0         21         1           NaN
1         21         0           NaN
2         22         1           NaN
3         22         0           NaN

Теперь, при использовании версии 0.21.0, он получает желаемый результат следующим образом:

>>> df = df.groupby('PlaceTest')['Approved', 'Not Approved'].sum().fillna("1").reset_index()

>>> df
   PlaceTest  Approved Not Approved
0         21         1            1
1         22         1            1

Однако при использовании того же подхода с версией 0.23.3. Ничего не получается.1025 *

>>> df.groupby('PlaceTest')['Approved', 'Not Approved'].sum().fillna("1").reset_index()
   PlaceTest  Approved  Not Approved
0         21         1           0.0
1         22         1           0.0

Есть ли какие-либо изменения в функциональности более широкой версии панд при использовании sum() вместе с методом fillna?

Буду признателен за любые комментарии экспертов по этому поводу, возможно, они естьно, кажется, сейчас у меня в голове.

Справочный вопрос идет сюда

Answer 1

Per Что нового в Pandas v0.22.0 (мой акцент):

Pandas 0.22.0 изменяет обработку пустых сумм и сумм и продуктов, не содержащих NA.В итоге получается, что

• Сумма пустой серии или серии, состоящей полностью из NA, теперь равна 0
• Произведение пустой серии или серии, полностью состоящей из NA, теперь1

Некоторые предыстории: в пандах 0.21 мы исправили давнюю несогласованность в возвращаемом значении серии all-NA в зависимости от того, было ли установлено узкое место.См. Sum / Prod для всех NaN или пустых Series / DataFrames теперь последовательно NaN .В то же время мы изменили сумму и количество пустых серий, чтобы они также стали NaN. В v0.21.0 сумма пустой серии или серии NA была равна NaN .

Так в v.0.22.0:

In [16]: df.groupby('PlaceTest')['Approved', 'Not Approved'].sum()
Out[16]: 
           Approved  Not Approved
PlaceTest                        
21                1           0.0
22                1           0.0

, тогда какв v0.21.0:

In [16]: df.groupby('PlaceTest')['Approved', 'Not Approved'].sum()
Out[16]: 
           Approved  Not Approved
PlaceTest                        
21                1           NaN
22                1           NaN

Таким образом, в первом случае fillna("1") ничего не делает, поскольку нет заполненных NaN.