Spec-Zone.ru › TensorFlow 2.4

tf.compat.v1.estimator.regressor_parse_example_spec

Генерирует спецификацию разбора для tf.parse_example, предназначенную для использования с регрессорами.

tf.compat.v1.estimator.regressor_parse_example_spec(
    feature_columns, label_key, label_dtype=tf.dtypes.float32, label_default=None,
    label_dimension=1, weight_column=None
)

Если пользователи сохраняют данные в формате tf.Example, им необходимо вызвать tf.parse_example с соответствующей спецификацией признаков. Эта утилита помогает в двух основных аспектах:

  • Пользователям необходимо объединить спецификацию разбора признаков с метками и весами (если таковые имеются), поскольку все они извлекаются из одного экземпляра tf.Example. Эта утилита объединяет эти спецификации.
  • Сложно сопоставить ожидаемую метку регрессора, например, DNNRegressor с соответствующей спецификацией tf.parse_example. Эта утилита кодирует её, получив соответствующую информацию от пользователя (ключ, тип данных).

Пример выходных данных спецификации разбора:

# Define features and transformations
feature_b = tf.feature_column.numeric_column(...)
feature_c_bucketized = tf.feature_column.bucketized_column(
  tf.feature_column.numeric_column("feature_c"), ...)
feature_a_x_feature_c = tf.feature_column.crossed_column(
    columns=["feature_a", feature_c_bucketized], ...)

feature_columns = [feature_b, feature_c_bucketized, feature_a_x_feature_c]
parsing_spec = tf.estimator.regressor_parse_example_spec(
    feature_columns, label_key='my-label')

# For the above example, regressor_parse_example_spec would return the dict:
assert parsing_spec == {
  "feature_a": parsing_ops.VarLenFeature(tf.string),
  "feature_b": parsing_ops.FixedLenFeature([1], dtype=tf.float32),
  "feature_c": parsing_ops.FixedLenFeature([1], dtype=tf.float32)
  "my-label" : parsing_ops.FixedLenFeature([1], dtype=tf.float32)
}

Пример использования с регрессором:

feature_columns = # define features via tf.feature_column
estimator = DNNRegressor(
    hidden_units=[256, 64, 16],
    feature_columns=feature_columns,
    weight_column='example-weight',
    label_dimension=3)
# This label configuration tells the regressor the following:
# * weights are retrieved with key 'example-weight'
# * label is a 3 dimension tensor with float32 dtype.


# Input builders
def input_fn_train():  # Returns a tuple of features and labels.
  features = tf.contrib.learn.read_keyed_batch_features(
      file_pattern=train_files,
      batch_size=batch_size,
      # creates parsing configuration for tf.parse_example
      features=tf.estimator.classifier_parse_example_spec(
          feature_columns,
          label_key='my-label',
          label_dimension=3,
          weight_column='example-weight'),
      reader=tf.RecordIOReader)
   labels = features.pop('my-label')
   return features, labels

estimator.train(input_fn=input_fn_train)
Аргументы
feature_columns Итерируемый объект, содержащий все столбцы признаков. Все элементы должны быть экземплярами классов, производными от _FeatureColumn.
label_key Строка, идентифицирующая метку. Это означает, что tf.Example хранит метки с этим ключом.
label_dtype tf.dtype определяет тип меток. По умолчанию это tf.float32.
label_default используется в качестве метки, если label_key отсутствует в заданном tf.Example. По умолчанию default_value равно None, что означает, что tf.parse_example будет генерировать ошибку, если метка отсутствует.
label_dimension Количество целевых значений регрессии на пример. Это размер последнего измерения меток и логарифмов Tensor объектов (как правило, у них форма [batch_size, label_dimension]).
weight_column Строка или NumericColumn, созданная с помощью tf.feature_column.numeric_column, определяющая столбец признаков, представляющий веса. Используется для уменьшения или увеличения важности примеров во время обучения. Будет умножаться на ошибку примера. Если это строка, она используется в качестве ключа для извлечения тензора весов из features. Если это NumericColumn, сырой тензор извлекается по ключу weight_column.key, затем функция weight_column.normalizer_fn применяется к нему для получения тензора весов.
Возвращаемое значение
Словарь, сопоставляющий каждый ключ признака с FixedLenFeature или VarLenFeature значением.
Исключения
ValueError Если метка используется в feature_columns.
ValueError Если weight_column используется в feature_columns.
ValueError Если любой из переданных feature_columns не является экземпляром класса _FeatureColumn.
ValueError Если weight_column не является экземпляром класса NumericColumn.
ValueError если label_key равно None.

© 2020 The TensorFlow Authors. All rights reserved.
Licensed under the Creative Commons Attribution License 3.0.
Code samples licensed under the Apache 2.0 License.
https://www.tensorflow.org/versions/r2.3/api_docs/python/tf/compat/v1/estimator/regressor_parse_example_spec

Spec-Zone.ru

Настройки Оффлайн Что нового Помощь О нас
Spec-Zone .ru
спецификации, руководства, описания, API