pandas.core.resample.Resampler.fillna

Resampler.fillna(method, limit=None)[source]

Заполнение пропущенных значений, появившихся при апсемплинге.

В статистике импутация — это процесс замены пропущенных данных подставленными значениями [1]. При ресемплировании данных могут появиться пропущенные значения (например, когда частота ресемплирования выше, чем исходная частота).

Пропущенные значения, которые были в исходных данных, не будут изменены.

Параметры

method:{‘pad’, ‘backfill’, ‘ffill’, ‘bfill’, ‘nearest’}

Метод для заполнения пропущенных значений в ресемплированных данных

• ‘pad’ или ‘ffill’: использовать предыдущее действительное значение для заполнения пробела (вперёд).

• ‘backfill’ или ‘bfill’: использовать следующее действительное значение для заполнения пробела.

• ‘nearest’: использовать ближайшее действительное значение для заполнения пробела.

limit:int, необязательно

Предел заполнения последовательных пропущенных значений.

Возвращаемое значение

Series или DataFrame

Ресемплированная Series или DataFrame с заполненными пропущенными значениями.

См. также

bfill

Заполнение пропущенных значений в ресемплированных данных с помощью метода «backfill».

ffill

Заполнение пропущенных значений в ресемплированных данных с помощью метода «forward fill».

nearest

Заполнение пропущенных значений в ресемплированных данных ближайшим значением, начиная с центра.

interpolate

Заполнение пропущенных значений с помощью интерполяции.

Series.fillna

Заполнение пропущенных значений в Series указанным методом, который может быть ‘bfill’ и ‘ffill’.

DataFrame.fillna

Заполнение пропущенных значений в DataFrame указанным методом, который может быть ‘bfill’ и ‘ffill’.

Ссылки

1

https://en.wikipedia.org/wiki/Imputation_(statistics)

Примеры

Ресемплирование Series:

>>> s = pd.Series([1, 2, 3],
...               index=pd.date_range('20180101', periods=3, freq='h'))
>>> s
2018-01-01 00:00:00    1
2018-01-01 01:00:00    2
2018-01-01 02:00:00    3
Freq: H, dtype: int64

Без заполнения пропущенных значений вы получите:

>>> s.resample("30min").asfreq()
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    NaN
2018-01-01 01:00:00    2.0
2018-01-01 01:30:00    NaN
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

>>> s.resample('30min').fillna("backfill")
2018-01-01 00:00:00    1
2018-01-01 00:30:00    2
2018-01-01 01:00:00    2
2018-01-01 01:30:00    3
2018-01-01 02:00:00    3
Freq: 30T, dtype: int64

>>> s.resample('15min').fillna("backfill", limit=2)
2018-01-01 00:00:00    1.0
2018-01-01 00:15:00    NaN
2018-01-01 00:30:00    2.0
2018-01-01 00:45:00    2.0
2018-01-01 01:00:00    2.0
2018-01-01 01:15:00    NaN
2018-01-01 01:30:00    3.0
2018-01-01 01:45:00    3.0
2018-01-01 02:00:00    3.0
Freq: 15T, dtype: float64

>>> s.resample('30min').fillna("pad")
2018-01-01 00:00:00    1
2018-01-01 00:30:00    1
2018-01-01 01:00:00    2
2018-01-01 01:30:00    2
2018-01-01 02:00:00    3
Freq: 30T, dtype: int64

>>> s.resample('30min').fillna("nearest")
2018-01-01 00:00:00    1
2018-01-01 00:30:00    2
2018-01-01 01:00:00    2
2018-01-01 01:30:00    3
2018-01-01 02:00:00    3
Freq: 30T, dtype: int64

Пропущенные значения, присутствующие до апсемплинга, не затрагиваются.

>>> sm = pd.Series([1, None, 3],
...               index=pd.date_range('20180101', periods=3, freq='h'))
>>> sm
2018-01-01 00:00:00    1.0
2018-01-01 01:00:00    NaN
2018-01-01 02:00:00    3.0
Freq: H, dtype: float64

>>> sm.resample('30min').fillna('backfill')
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    NaN
2018-01-01 01:00:00    NaN
2018-01-01 01:30:00    3.0
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

>>> sm.resample('30min').fillna('pad')
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    1.0
2018-01-01 01:00:00    NaN
2018-01-01 01:30:00    NaN
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

>>> sm.resample('30min').fillna('nearest')
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    NaN
2018-01-01 01:00:00    NaN
2018-01-01 01:30:00    3.0
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

Ресемплирование DataFrame выполняется по столбцам. Все те же опции доступны.

>>> df = pd.DataFrame({'a': [2, np.nan, 6], 'b': [1, 3, 5]},
...                   index=pd.date_range('20180101', periods=3,
...                                       freq='h'))
>>> df
                       a  b
2018-01-01 00:00:00  2.0  1
2018-01-01 01:00:00  NaN  3
2018-01-01 02:00:00  6.0  5

>>> df.resample('30min').fillna("bfill")
                       a  b
2018-01-01 00:00:00  2.0  1
2018-01-01 00:30:00  NaN  3
2018-01-01 01:00:00  NaN  3
2018-01-01 01:30:00  6.0  5
2018-01-01 02:00:00  6.0  5