Мета-поисковая система / веб-парсинг в Android Studio / JAVA - PullRequest
0 голосов
/ 18 июня 2020

Я хочу создать приложение, которое в основном ищет что-то с некоторыми фильтрами с различных веб-сайтов (мне не требуется входить на эти сторонние веб-сайты, чтобы доступные данные были открыты для publi c) и отображать это на моем применение. У меня несколько вопросов:

1. Это законно?
2. Это веб-скрапинг или мета-поисковая система?
3. Могу ли я получить дополнительную информацию (любые веб-ссылки / статьи), чтобы узнать больше об этом? Как этого добиться технически? Я знаю, что мы можем использовать метод XPath для очистки, но мне интересно, есть ли еще способы. Я НЕ прошу весь код. С чего начать / какие-либо указания?

Заранее спасибо!

1 Ответ

0 голосов
/ 18 июня 2020

Для начала нужно понять, как работают поисковые системы! -Наши так называемые поисковые системы, такие как google, имеют специальные программы, разработанные для извлечения информации из Интернета, они называются «пауками». Паук в основном прокручивает все веб-страницы в пределах поискового запроса и находит соответствующую информацию, однако это действительно сложная вещь. работать над! Чтобы самостоятельно разработать паука, требуется действительно хороший код и знания алгоритмов. Однако, если вы сумеете справиться с этим, вы будете зарабатывать неплохую сумму денег, но это действительно редкость, если только вы не явный гений!

...