POST-запрос, возвращающий текст / html, а не JSON, как мне получить JSON в JS? - PullRequest
1 голос
/ 08 мая 2019

Для работы мы проверяем регистрацию избирателей через государственные сайты. Недавнее обновление сломало нашу проверку.

Теперь им требуется токен / cookie XSFR. Мне удалось получить cookie с кодом ниже и отправить его в запросе POST. Сервер отвечает кодом 200. Если вы закомментируете cookie / XSFR, то увидите, что он отвечает 403.

Я использую модуль запроса. Сервер отвечает HTML / текстовым файлом, а не файлом JSON, как в браузере. Что я делаю неправильно? Я включил некоторую фиктивную информацию, если информация плохая, сервер все еще отвечает JSON-файлом. Любая помощь будет оценена!

Я удалил ссылки, которые мы используем для проверки избирателей, и заменил их на Google.com для исправленной проблемы.

//using request module    npm install request --save

var request = require('request');
var jar = request.jar();
var request = request.defaults({
jar: jar,
});
var jar = request.jar();

// get cookie for XSRF token

request.get({
    url: 'https://www.google.com',
    method: 'get',
    jar: jar
}, () => {
    cookies = jar.getCookies('https://www.google.com');
    //output cookie
    console.log(cookies);
    var cookieToString = cookies.toString()
    //slice token for cookie response
    var xsrfCookie = cookieToString.slice(0, 47)
    //slice token for token response
    var slicedCookie = cookieToString.slice(11, 47)

    //send POST with xsrf token & cookie

    var request = require('request');
    var options = {

        uri: 'https://www.google.com',
        headers: {
            //custom HTTP headers for response
            Host: 'votesearch.google.com',
            'User-Agent': 'Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:66.0) Gecko/20100101 Firefox/66.0',
            Accept: 'application/json, text/plain, */*',
            'Accept-Language': 'en-US,en;q=0.5',
            'Accept-Encoding': 'gzip, deflate, br',
            Referer: 'https://www.google.com',
            'Content-Type': 'application/json;charset=utf-8',
            'X-XSRF-TOKEN': slicedCookie,
            //'Content-Length': '118', leave commented out or server response hangs - not sure why
            Connection: 'keep-alive',
            Cookie: xsrfCookie,
            Pragma: 'no-cache',
            'Cache-Control': 'no-cache'
        },
        method: 'POST',
        json: {
            city: 'sometown',
            dob: '01-01-1950',
            firstName: 'John',
            lastName: 'Doe',
            street: '1234 street',
            zip: '12345'
        }
    }
    //server responsds with content type 'text/html' not JSON like in browser
    request(options, function (error, response, body) {
        if (!error && response.statusCode == 200) {
            console.log(body.id) // Print the shortened url - not working.
            console.log(response.headers); // can I get JSON from this?
            console.log(response.statusCode)


        } else {
            console.log('response code ' + response.statusCode);
            console.log('error ' + error)
        }
    });

})

1 Ответ

1 голос
/ 08 мая 2019

При выполнении запроса с использованием модуля request, чтобы включить в запрос тело запроса в кодировке JSON, для параметра body должен быть указан сериализуемый объект JSON, а для поля json - до true.

Установка поля json на true также гарантирует, что ответ будет проанализирован как JSON и будет доступен в поле body ответа.

Во втором запросе во фрагменте кода ur поле json устанавливается на объект, который не является допустимым значением.

...