Я хочу написать Java-программу для чтения данных для гонки с веб-страницы , которая обновляется с живыми результатами. Веб-страница содержит код Javascript, который, как я считаю, записывает время прохождения в таблицу по мере их регистрации. Мне интересно, как лучше это сделать.
Сейчас я понимаю, что я могу получить данные с помощью HTMLUnit или JSoup или какой-либо их комбинации, чтобы прочитать веб-сайт в виде строки и проанализировать данные, но я понимаю, что мне нужно будет очень часто перезагружать веб-страницу, чтобы получить результаты по мере их загрузки, которые будут потреблять много пропускной способности и будут сильно загружать процессор. Можно ли каким-либо образом напрямую подключиться к серверу, чтобы получить необработанные данные по мере их загрузки, а не читать всю веб-страницу, или есть лучший способ повторного чтения веб-страницы?