Невозможно открыть маринованную модель Sagemaker XGBoost - PullRequest
Новая
       28

Невозможно открыть маринованную модель Sagemaker XGBoost

0 голосов
/ 11 марта 2020

Я пытаюсь открыть маринованную модель XGBoost, которую я создал в AWS Sagemaker, чтобы посмотреть на важность функций в модели. Я пытаюсь следить за ответами в этом посте . Однако я получаю сообщение об ошибке, показанное ниже. Когда я пытаюсь позвонить Booster.save_model, я получаю сообщение об ошибке 'Estimator' object has no attribute 'save_model'. Как я могу решить это? 

# Build initial model
sess = sagemaker.Session()
s3_input_train = sagemaker.s3_input(s3_data='s3://{}/{}/train/'.format(bucket, prefix), content_type='csv')
xgb_cont = get_image_uri(region, 'xgboost', repo_version='0.90-1')
xgb = sagemaker.estimator.Estimator(xgb_cont, role, train_instance_count=1, train_instance_type='ml.m4.4xlarge',
                                    output_path='s3://{}/{}'.format(bucket, prefix), sagemaker_session=sess)
xgb.set_hyperparameters(eval_metric='rmse', objective='reg:squarederror', num_round=100)
ts = strftime("%Y-%m-%d-%H-%M-%S", gmtime())
xgb_name = 'xgb-initial-' + ts
xgb.set_hyperparameters(eta=0.1, alpha=0.5, max_depth=10)
xgb.fit({'train': s3_input_train}, job_name=xgb_name)

# Load model to get feature importances
model_path = 's3://{}/{}//output/model.tar.gz'.format(bucket, prefix, xgb_name)
fs = s3fs.S3FileSystem()
with fs.open(model_path, 'rb') as f:
    with tarfile.open(fileobj=f, mode='r') as tar_f:
        with tar_f.extractfile('xgboost-model') as extracted_f:
            model = pickle.load(extracted_f)

XGBoostError: [19:16:42] /workspace/src/learner.cc:682: Check failed: header == serialisation_header_: 

  If you are loading a serialized model (like pickle in Python) generated by older
  XGBoost, please export the model by calling `Booster.save_model` from that version
  first, then load it back in current version.  There's a simple script for helping
  the process. See:

    https://xgboost.readthedocs.io/en/latest/tutorials/saving_model.html

  for reference to the script, and more details about differences between saving model and
  serializing.

1 Ответ

0 голосов
/ 16 марта 2020

Какую версию XGBoost вы используете в ноутбуке? Формат модели изменился в XGBoost 1.0. См. https://xgboost.readthedocs.io/en/latest/tutorials/saving_model.html. Короткая версия: если вы используете 1.0 в ноутбуке, вы не можете загрузить маринованную модель.

Вот рабочий пример использования XGBoost в режиме сценария (который гораздо более гибкий, чем встроенный al go):

...