Usando o JSoup para obter resultados do Google
Estou tentando usar o JSoup para obter os resultados da pesquisa do Google. Atualmente este é o meu código.
public class GoogleOptimization {
public static void main (String args[])
{
Document doc;
try{
doc = Jsoup.connect("https://www.google.com/search?as_q=&as_epq=%22Yorkshire+Capital%22+&as_oq=fraud+OR+allegations+OR+scam&as_eq=&as_nlo=&as_nhi=&lr=lang_en&cr=countryCA&as_qdr=all&as_sitesearch=&as_occt=any&safe=images&tbs=&as_filetype=&as_rights=").userAgent("Mozilla").ignoreHttpErrors(true).timeout(0).get();
Elements links = doc.select("what should i put here?");
for (Element link : links) {
System.out.println("\n"+link.text());
}
}
catch (IOException e) {
e.printStackTrace();
}
}
}
Estou apenas tentando obter o título dos resultados da pesquisa e os snippets abaixo do título. Então, sim, eu não sei qual elemento procurar para raspar estes. Se alguém tiver um método melhor para raspar o Google usando java, eu adoraria saber.
Obrigado.