Добавить к объекту curl и добавить в массив в файле с jq? - PullRequest
Новая
       14

Добавить к объекту curl и добавить в массив в файле с jq?

0 голосов
/ 05 декабря 2018

Я пытаюсь динамически генерировать массив объектов json из URL-адреса и сохранять массив в файл.Можно ли направить вывод локонов в jq, изменить объект json curl, а затем добавить его в список json в файле и сохранить обновленный список обратно в файл?

Цель состоит в том, чтобы выполнить итерацию по списку инажмите URL, потянув объект вниз, затем добавив поле к объекту и записав результат в один файл json.

Сначала мы свернем URL, чтобы получить объект пользователя и добавить в него новое поле. 

curl -s https://jsonplaceholder.typicode.com/users/1 | jq '. + {"level": 15}'

Разница, показывающая, что добавляется к объекту. 

diff <(curl -s https://jsonplaceholder.typicode.com/users/1 | jq . ) <(curl -s https://jsonplaceholder.typicode.com/users/1 | jq '. + {"level": 15}')

Затем мы добавляем этот пользовательский объект в список в userList.json.Это та часть, на которой я поставлен в тупик.

В-третьих, мы записываем этот обновленный список обратно в файл. 

JQ updated list command > userList.json

Сверните URL для пользовательского объекта, добавьте значение к пользовательскому объекту и добавьте пользовательский объект к массиву в файле.Я попытался использовать --argjson fileInfo "$(<userList.json)", но не смог заставить его работать.Я получаю неверное выражение пути или другие ошибки из-за невозможности добавить объект в массив.Я попробовал |= . +, но не могу понять, как правильно ссылаться на два набора данных. 

echo -e "[\n]" > userList.json
for i in {1..4}; do
  echo -e "\n==> User ${i}"
  testUrl=https://jsonplaceholder.typicode.com/users/${i}
  curl -s ${testUrl} | jq --argjson fileData "$(<userList.json)" '. + {level: 15} += [$fileData]' > userList.json
done
echo -e "==> Complete"
jq . userList.json

Не-json способ создания файла, но в нем не будет разделителя запятой междукаждый пользовательский объект, я мог бы программно добавить запятую, но я бы предпочел выяснить jq и вместо этого написать правильный json.Сравните выходные данные этого цикла с ожидаемыми данными ниже. 

for i in {1..4}; do 
  testUrl=https://jsonplaceholder.typicode.com/users/${i}
  curl -s ${testUrl} | jq '. + {level: 15}' >> userList.json
done

Ожидаемый результат файла userList.json, это 4 пользовательских объекта с добавленным уровнем поля. 

[
  {
    "id": 1,
    "name": "Leanne Graham",
    "username": "Bret",
    "email": "Sincere@april.biz",
    "address": {
      "street": "Kulas Light",
      "suite": "Apt. 556",
      "city": "Gwenborough",
      "zipcode": "92998-3874",
      "geo": {
        "lat": "-37.3159",
        "lng": "81.1496"
      }
    },
    "phone": "1-770-736-8031 x56442",
    "website": "hildegard.org",
    "company": {
      "name": "Romaguera-Crona",
      "catchPhrase": "Multi-layered client-server neural-net",
      "bs": "harness real-time e-markets"
    },
    "level": 15
  },
  {
    "id": 2,
    "name": "Ervin Howell",
    "username": "Antonette",
    "email": "Shanna@melissa.tv",
    "address": {
      "street": "Victor Plains",
      "suite": "Suite 879",
      "city": "Wisokyburgh",
      "zipcode": "90566-7771",
      "geo": {
        "lat": "-43.9509",
        "lng": "-34.4618"
      }
    },
    "phone": "010-692-6593 x09125",
    "website": "anastasia.net",
    "company": {
      "name": "Deckow-Crist",
      "catchPhrase": "Proactive didactic contingency",
      "bs": "synergize scalable supply-chains"
    },
    "level": 15
  },
  {
    "id": 3,
    "name": "Clementine Bauch",
    "username": "Samantha",
    "email": "Nathan@yesenia.net",
    "address": {
      "street": "Douglas Extension",
      "suite": "Suite 847",
      "city": "McKenziehaven",
      "zipcode": "59590-4157",
      "geo": {
        "lat": "-68.6102",
        "lng": "-47.0653"
      }
    },
    "phone": "1-463-123-4447",
    "website": "ramiro.info",
    "company": {
      "name": "Romaguera-Jacobson",
      "catchPhrase": "Face to face bifurcated interface",
      "bs": "e-enable strategic applications"
    },
    "level": 15
  },
  {
    "id": 4,
    "name": "Patricia Lebsack",
    "username": "Karianne",
    "email": "Julianne.OConner@kory.org",
    "address": {
      "street": "Hoeger Mall",
      "suite": "Apt. 692",
      "city": "South Elvis",
      "zipcode": "53919-4257",
      "geo": {
        "lat": "29.4572",
        "lng": "-164.2990"
      }
    },
    "phone": "493-170-9623 x156",
    "website": "kale.biz",
    "company": {
      "name": "Robel-Corkery",
      "catchPhrase": "Multi-tiered zero tolerance productivity",
      "bs": "transition cutting-edge web services"
    },
    "level": 15
  }
]

1 Ответ

0 голосов
/ 06 декабря 2018

Если вы знаете лучшее решение, использующее jq с в forloop для записи пользовательских данных в массив с в файле, дайте мне знать.Мне действительно интересно понять, возможно ли это с помощью jq.

. Я бы предпочел, если бы мне не нужно было записывать временные файлы, а вместо этого можно было бы читать из файла, добавлять новые пользовательские данные curl и записыватьвернуться к файлу внутри цикла for, но я получаю результаты и правильный json таким образом.

Мое полуприличное решение с использованием JQ.Я заканчиваю тем, что пишу несколько пользовательских файлов, а затем объединяю их вместе с хлюпанием.

for i in {1..4}; do
  echo -e "==> Creating a temp user json file for user${i}."
  testUrl=https://jsonplaceholder.typicode.com/users/${i}
  curl -s ${testUrl} | jq '. + {level: 15}' >> /tmp/temp_user_${i}_information_file.json
done

echo -e "==> Creating the final users json file."
jq -s '.' /tmp/temp_user_*_information_file.json > userList.json
...