как google программно?

Question

Я хочу запросить google программно в Java, чтобы получить тексты для целей извлечения отношений.

Например, я хочу написать в Java:

result_list=googleAgent.search("Berlin Germany"); 

В result_list, я могу получить список предложений, которые содержат «Берлин» и «Германия». Затем я могу сделать анализ НЛП и извлечь отношение.

Могу ли я вообще это сделать? И как это?

Answer 1

Google запрещает программные поиски непосредственно через свой веб-сайт (поэтому у них есть search API). Если вы настаиваете на попытке сделать это, Google, в конце концов, вытащит капчу, которую ваш клиент должен будет решить. Итак, теперь вы будете пытаться делать NLP, пока вы делаете OCR;)

Однако их API поиска не так уж хорош. Вы ограничены определенным количеством запросов в день (100) и информацией для каждого результата.

Answer 2

Вы можете использовать Google's Custom Search API