Как программно получить веб-страницы с запросом в java

что мне нужно, так это отправить запрос в поисковую систему и получить первые 100 веб-страниц, чтобы позже разобраться с их содержимым. Подача запроса в поисковую систему и работа с веб-страницами, полученными в результате поисковой системы, должны выполняться внутри программы. должен ли я использовать API поисковой системы, например, google-api или bing-api, или есть другой способ?


person BokraA7la    schedule 23.05.2012    source источник


Ответы (1)


Подводя итог сказанному в комментариях: да, API поисковой системы — лучший способ.

Получение результатов в виде веб-страницы и последующий их анализ — наихудший из возможных подходов (если у вас нет определенных потребностей, которые делают использование API невыносимым).

person Anton    schedule 29.05.2012