Как я мог сохранить паркет в S3? - PullRequest
0 голосов
/ 06 апреля 2020

Я бы хотел экспортировать свой набор данных в S3 m. Я пытался вызвать эту функцию на Jupyter, но ничего не получил. У вас есть предложение, я не нашел хорошего способа сделать это.

def write_parquet_to_s3(dataframe, region, access_key, secret_key, bucket, filename):
    #create buffer
    braquet_buffer = BytesIO()

    #convert to parquet
    dataframe.to_parquet(braquet_buffer, index=False)

    s3_resource = get_s3_resource(region, access_key, secret_key)

    # Write buffer to S3 object
    s3_resource.Object(bucket, filename).put(Body=braquet_buffer.getvalue())```



Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...