Какие-либо решения для автоматического сбора данных на веб-сайте? - PullRequest
1 голос
/ 19 января 2011

Я хочу написать приложение для сбора данных с веб-сайта, и веб-сайт использует ajax для получения данных с сервера.
Есть ли какие-либо решения, которые я мог бы получить эти данные удобно и сохранить в моей собственной базе данных? Поскольку данные на этом сайте являются динамическими, исторические данные исчезнут, и я хочу их отслеживать.

Пожалуйста, предложите любые решения, заранее спасибо!

Ответы [ 2 ]

0 голосов
/ 20 января 2011

Вы можете попробовать IRobotSoft Web Scraper. Посмотрите демоверсии здесь http://irobotsoft.com/help/, чтобы узнать, хотите ли вы этого

0 голосов
/ 19 января 2011

Selenium RC может сделать это с небольшим трудом. \

http://seleniumhq.org/

...