pandas.errors.DtypeWarning
- exceptionpandas.errors.DtypeWarning[source]
-
Предупреждение, выводимое при чтении столбцов с разными типами данных из файла.
Выдается при несовместимости типов данных. Это может произойти, когда read_csv или read_table сталкиваются с неоднородными типами данных в столбце(ах) заданного CSV-файла.
См. также
read_csv-
Чтение CSV (разделенного запятыми) файла в DataFrame.
read_table-
Чтение общего файла с разделителями в DataFrame.
Примечания
Это предупреждение выдается при работе с большими файлами, поскольку проверка типа данных происходит для каждого считываемого фрагмента.
Несмотря на предупреждение, CSV-файл считывается с разными типами в одном столбце, который будет иметь тип object. Для лучшего понимания этой проблемы см. примеры ниже.
Примеры
Этот пример создает и считывает большой CSV-файл со столбцом, содержащим int и str.
>>> df = pd.DataFrame({'a': (['1'] * 100000 + ['X'] * 100000 + ... ['1'] * 100000), ... 'b': ['b'] * 300000}) >>> df.to_csv('test.csv', index=False) >>> df2 = pd.read_csv('test.csv') ... # DtypeWarning: Columns (0) have mixed typesВажно отметить, что
df2будет содержать и str, и int для одного и того же входного значения «1».>>> df2.iloc[262140, 0] '1' >>> type(df2.iloc[262140, 0]) <class 'str'> >>> df2.iloc[262150, 0] 1 >>> type(df2.iloc[262150, 0]) <class 'int'>
Один из способов решения этой проблемы — использование параметра dtype в функциях read_csv и read_table для явного указания преобразования:
>>> df2 = pd.read_csv('test.csv', sep=',', dtype={'a': str})Предупреждение не было выведено.
© 2008–2022, AQR Capital Management, LLC, Lambda Foundry, Inc. and PyData Development Team
Licensed under the 3-clause BSD License.
https://pandas.pydata.org/pandas-docs/version/2.2.2/reference/api/pandas.errors.DtypeWarning.html