Испорченные поля при передаче CSV-файлов вastic + kibana - PullRequest
0 голосов
/ 18 февраля 2020

Я пытаюсь передать файлы csv в elasti c, используя плагин logsta sh через HTTP. Когда я смотрю на то, что у меня есть в базе данных, я вижу, что поля были перепутаны, CSV-файл правильный. Еще одна вещь, которую я вижу, это то, что наряду с данными для каждой записи я также получаю заголовки http, я бы предпочел не иметь их, но в любом случае я мог бы жить с ними. Могут ли они быть причиной проблемы?

Я копирую первую строку файла CSV и получаю в elasti c.

Job, BuildId, Start time, Stop time, Execution time, Queue time, Executor, Result, Parent, User
DpiTools_Admin_CleaningEselnlx_v0.1.0, 32449, 2020-02-18T01:12:010100, 2020-02-18T01:12:020100, 1.144, 0.096, eselnlx2475-Admin., SUCCESS., DpiTools_Admin_CleaningEselnlx_v0.1.0, None

Тогда что я получаю в elastiv как видно в кибане это:

Result: None Executor: DpiTools_Admin_CleaningEselnlx_v0.1.0 Stop_time: 0.236 @version:1 @timestamp:February 18th 2020, 11:17:53.455 BuildId: 32449 Execution_time: eselnlx2578-Admin. Stop_date: 0.100 Start_time: 2020-02-18T01:12:010100 Start_date: 2020-02-18T01:12:010100 headers.http_host:127.0.0.1:5044 headers.request_path:/ headers.http_version:HTTP/1.1 headers.connection:Keep-Alive headers.request_method:PUT headers.http_user_agent:Mozilla/5.0 (Windows NT; Windows NT 10.0; es-ES) WindowsPowerShell/5.1.17763.771 headers.content_length:3166 headers.http_accept: - Job:label=eselnlx2578-Admin message:label=eselnlx2578-Admin, 32449, 2020-02-18T01:12:010100, 2020-02-18T01:12:010100, 0.100, 0.236, eselnlx2578-Admin., SUCCESS., DpiTools_Admin_CleaningEselnlx_v0.1.0, None Queue_time: SUCCESS. host:172.19.0.1 _id:z0bNV3ABGO94josV3Kjr _type:doc _index:job-executions _score:1

1 Ответ

0 голосов
/ 18 февраля 2020

Решено, я забыл, что в конфигурации были заголовки csv, из предыдущей версии у вас были дата и время в двух полях, и теперь они в одном и том же, поэтому все испортилось.

...