Spec-Zone.ru › pandas 2

pandas.errors.DtypeWarning

exceptionpandas.errors.DtypeWarning[source]

Предупреждение, выводимое при чтении столбцов с разными типами данных из файла.

Выдается при несовместимости типов данных. Это может произойти, когда read_csv или read_table сталкиваются с неоднородными типами данных в столбце(ах) заданного CSV-файла.

См. также

read_csv

Чтение CSV (разделенного запятыми) файла в DataFrame.

read_table

Чтение общего файла с разделителями в DataFrame.

Примечания

Это предупреждение выдается при работе с большими файлами, поскольку проверка типа данных происходит для каждого считываемого фрагмента.

Несмотря на предупреждение, CSV-файл считывается с разными типами в одном столбце, который будет иметь тип object. Для лучшего понимания этой проблемы см. примеры ниже.

Примеры

Этот пример создает и считывает большой CSV-файл со столбцом, содержащим int и str.

>>> df = pd.DataFrame({'a': (['1'] * 100000 + ['X'] * 100000 +
...                          ['1'] * 100000),
...                    'b': ['b'] * 300000})  
>>> df.to_csv('test.csv', index=False)  
>>> df2 = pd.read_csv('test.csv')  
... # DtypeWarning: Columns (0) have mixed types

Важно отметить, что df2 будет содержать и str, и int для одного и того же входного значения «1».

>>> df2.iloc[262140, 0]  
'1'
>>> type(df2.iloc[262140, 0])  
<class 'str'>
>>> df2.iloc[262150, 0]  
1
>>> type(df2.iloc[262150, 0])  
<class 'int'>

Один из способов решения этой проблемы — использование параметра dtype в функциях read_csv и read_table для явного указания преобразования:

>>> df2 = pd.read_csv('test.csv', sep=',', dtype={'a': str})  

Предупреждение не было выведено.

© 2008–2022, AQR Capital Management, LLC, Lambda Foundry, Inc. and PyData Development Team
Licensed under the 3-clause BSD License.
https://pandas.pydata.org/pandas-docs/version/2.2.2/reference/api/pandas.errors.DtypeWarning.html

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API