pandas.core.resample.Resampler.fillna

Resampler.fillna(method, limit=None) [source]

Заполнение пропущенных значений, появившихся при увеличении частоты.

В статистике импутация — это процесс замены пропущенных данных на подставленные значения [1]. При пересэмплировании данных могут появиться пропущенные значения (например, когда частота пересэмплирования выше исходной частоты).

Пропущенные значения, существовавшие в исходных данных, не будут изменены.

Параметры:

method : {‘pad’, ‘backfill’, ‘ffill’, ‘bfill’, ‘nearest’} Метод для заполнения пропусков в пересэмплированных данных ‘pad’ или ‘ffill’: заполнение предыдущим действительным значением (вперед). ‘backfill’ или ‘bfill’: заполнение следующим действительным значением. ‘nearest’: заполнение ближайшим действительным значением. limit : integer, optional Предел количества последовательных пропущенных значений для заполнения.

Возвращает:

Series или DataFrame Пересэмплированный Series или DataFrame с заполненными пропущенными значениями.

См. также

backfill

Заполнение пропусков в пересэмплированных данных путем заполнения с конца.

pad

Заполнение пропусков в пересэмплированных данных путем заполнения с начала.

nearest

Заполнение пропусков в пересэмплированных данных ближайшим соседом, начиная с центра.

interpolate

Заполнение пропусков с помощью интерполяции.

pandas.Series.fillna

Заполнение пропусков в Series указанным методом, который может быть ‘bfill’ и ‘ffill’.

pandas.DataFrame.fillna

Заполнение пропусков в DataFrame указанным методом, который может быть ‘bfill’ и ‘ffill’.

Ссылки

[1]	(1, 2) https://en.wikipedia.org/wiki/Imputation_(statistics)

Примеры

Пересэмплирование Series:

>>> s = pd.Series([1, 2, 3],
...               index=pd.date_range('20180101', periods=3, freq='h'))
>>> s
2018-01-01 00:00:00    1
2018-01-01 01:00:00    2
2018-01-01 02:00:00    3
Freq: H, dtype: int64

Без заполнения пропущенных значений вы получите:

>>> s.resample("30min").asfreq()
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    NaN
2018-01-01 01:00:00    2.0
2018-01-01 01:30:00    NaN
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

>>> s.resample('30min').fillna("backfill")
2018-01-01 00:00:00    1
2018-01-01 00:30:00    2
2018-01-01 01:00:00    2
2018-01-01 01:30:00    3
2018-01-01 02:00:00    3
Freq: 30T, dtype: int64

>>> s.resample('15min').fillna("backfill", limit=2)
2018-01-01 00:00:00    1.0
2018-01-01 00:15:00    NaN
2018-01-01 00:30:00    2.0
2018-01-01 00:45:00    2.0
2018-01-01 01:00:00    2.0
2018-01-01 01:15:00    NaN
2018-01-01 01:30:00    3.0
2018-01-01 01:45:00    3.0
2018-01-01 02:00:00    3.0
Freq: 15T, dtype: float64

>>> s.resample('30min').fillna("pad")
2018-01-01 00:00:00    1
2018-01-01 00:30:00    1
2018-01-01 01:00:00    2
2018-01-01 01:30:00    2
2018-01-01 02:00:00    3
Freq: 30T, dtype: int64

>>> s.resample('30min').fillna("nearest")
2018-01-01 00:00:00    1
2018-01-01 00:30:00    2
2018-01-01 01:00:00    2
2018-01-01 01:30:00    3
2018-01-01 02:00:00    3
Freq: 30T, dtype: int64

Пропущенные значения, присутствующие до пересэмплирования, не затрагиваются.

>>> sm = pd.Series([1, None, 3],
...               index=pd.date_range('20180101', periods=3, freq='h'))
>>> sm
2018-01-01 00:00:00    1.0
2018-01-01 01:00:00    NaN
2018-01-01 02:00:00    3.0
Freq: H, dtype: float64

>>> sm.resample('30min').fillna('backfill')
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    NaN
2018-01-01 01:00:00    NaN
2018-01-01 01:30:00    3.0
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

>>> sm.resample('30min').fillna('pad')
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    1.0
2018-01-01 01:00:00    NaN
2018-01-01 01:30:00    NaN
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

>>> sm.resample('30min').fillna('nearest')
2018-01-01 00:00:00    1.0
2018-01-01 00:30:00    NaN
2018-01-01 01:00:00    NaN
2018-01-01 01:30:00    3.0
2018-01-01 02:00:00    3.0
Freq: 30T, dtype: float64

Пересэмплирование DataFrame выполняется по столбцам. Доступны все те же параметры.

>>> df = pd.DataFrame({'a': [2, np.nan, 6], 'b': [1, 3, 5]},
...                   index=pd.date_range('20180101', periods=3,
...                                       freq='h'))
>>> df
                       a  b
2018-01-01 00:00:00  2.0  1
2018-01-01 01:00:00  NaN  3
2018-01-01 02:00:00  6.0  5

>>> df.resample('30min').fillna("bfill")
                       a  b
2018-01-01 00:00:00  2.0  1
2018-01-01 00:30:00  NaN  3
2018-01-01 01:00:00  NaN  3
2018-01-01 01:30:00  6.0  5
2018-01-01 02:00:00  6.0  5