Попытка долго перевести в формат ToDate - PullRequest
Новая
       23

Попытка долго перевести в формат ToDate

0 голосов
/ 12 июня 2019

У меня длинный ввод "20190503143744", и я хотел преобразовать его в формат "2019-09-06 11:46:22"

Попробуем следующий код: 

A = LOAD 'stp_master_subscriber_profile' using org.apache.hive.hcatalog.pig.HCatLoader() as (mdn:chararray, imei:chararray, imsi:chararray, subscriber_id:long, manufacturer:chararray, model:chararray, update_time:long, scenario:chararray, vz_customer:chararray, commit_time:long);
B = FOREACH A GENERATE ToString(ToDate((chararray)commit_time,'yyyyMMdd'),'yyyy-MM-dd HH:mm:ss') as event_date_gmt:chararray;

Получение ошибки:

ERROR 1066: Unable to open iterator for alias B. Backend error : org.apache.pig.backend.executionengine.ExecException: ERROR 0: Exception while executing [POUserFunc (Name: POUserFunc(org.apache.pig.builtin.ToDate2ARGS)[datetime] - scope-15 Operator Key: scope-15) children: null at []]: java.lang.IllegalArgumentException: Invalid format: "20190503143744" is malformed at "143744"

1 Ответ

0 голосов
/ 12 июня 2019

Проблема в том, что вы указываете формат как yyyyMMdd, но ваш исходный ввод имеет формат yyyyMMddHHmmss, поэтому вы получаете сообщение об ошибке, когда Pig достигает 143744 вместо конца вашей строки.Попробуйте это: 

B = FOREACH A GENERATE ToString(ToDate((chararray)commit_time,'yyyyMMddHHmmss'),
    'yyyy-MM-dd HH:mm:ss') as event_date_gmt;
...