Загрузка сжатых данных из Amazon S3 в Postgres с использованием данных - PullRequest
0 голосов
/ 23 октября 2018

Я пытаюсь загрузить данные, которые хранятся в формате .gz на S3, на сервер PostgreSQL, используя Datastage.Я использую разъем ODBC на стороне назначения (базы данных).Я могу загружать несжатые данные из S3 в PostgreSQL, но пока мне не повезло со сжатыми данными.Я попробовал Expand Stage, но это не помогает, или я поступаю неправильно.Без «Expand» данные поступают, но он пытается прочитать сжатые данные, но при этом происходит сбой и выдается ошибка:

Amazon_S3_0,1: com.ascential.e2.common.CC_Exception: Failed to initialize the parser: The row delimiter was not found within the first 132 bytes of the file. Ensure that the Row delimiter property matches the row delimiter of the file.
at com.ibm.iis.cc.cloud.CloudLogger.createCCException (CloudLogger.java: 196)
at com.ibm.iis.cc.cloud.CloudStage.processReadAndParse (CloudStage.java: 1591)
at com.ibm.iis.cc.cloud.CloudStage.process (CloudStage.java: 680)
at com.ibm.is.cc.javastage.connector.CC_JavaAdapter.run (CC_JavaAdapter.java: 443)


Amazon_S3_0,1: Failed to initialize the parser: The row delimiter was not found within the first 132 bytes of the file. Ensure that the Row delimiter property matches the row delimiter of the file. (com.ibm.iis.cc.cloud.CloudLogger::createCCException, file CloudLogger.java, line 196)

Если кто-то сталкивался с этим, пожалуйста, поделитесь своими ценными данными,

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...