Resultados da pesquisa a pedido "web-scraping"
Resultados diferentes ao usar Selenium + Python
Estou aprendendo a usar o Selenium com o Python tentando descartar o software Matrix ITA (caso você não saiba disso, ajuda a encontrar boas tarifas de voo). Estou preenchendo todo o formulário com Selenium exatamente da mesma maneira ...
Raspagem na Web das principais estatísticas de ações do Finviz com R
Tentei descartar do Finviz algumas estatísticas importantes sobre as ações. Apliquei códigos da pergunta original:Rastreio na Web das principais estatísticas no Yahoo! Finanças com ...
Solicite uma fonte html totalmente renderizada em javascript em um site e encontre todas as tags iframe
Atualmente, estou tentando usar selênio e BeautifulSoup para recuperar todas as tags iframe de um site. O problema é que eu não estou obtendo todos os iframes porque existem documentos html internos na página que o BS4 não está pesquisando e não ...
No Excel VBA, como verificar se a página da Web está totalmente carregada?
Para pausar o código até que uma página da Web esteja totalmente carregada, eu tenho usado o método abaixo com grande sucesso quase o tempo todo. Do While objIE.Busy = True Or objIE.readyState <> 4: DoEvents: LoopMas, ocasionalmente, vejo o ...
Usando R para obter o URL de download pelo nome do link
Estou tentando usarrvest para baixar uma lista de arquivos deesse site. [https://www-air.larc.nasa.gov/cgi-bin/ArcView/actamerica.2016?C130=1]Os nomes dos arquivos são regulares, mas os URLs de download não correspondem a um padrão (apenas ...
Como posso exportar dados raspados para um arquivo csv no formato certo?
Fiz uma melhoria no meu código de acordo comesta [https://stackoverflow.com/a/45958106/8476752]sugestão de @paultrmbrth. o que eu preciso é raspar dados de páginas semelhantes ...
como selecionar e extrair textos entre dois elementos?
Estou tentando rasparesta [http://www.imdb.com/title/tt0092455/trivia?tab=mc&ref_=tt_trv_cnn]site usando scrapy. A estrutura da página fica assim: <div class="list"> <a id="follows" name="follows"></a> <h4 class="li_group">Follows</h4> <div ...
Não é possível se livrar de linhas em branco na saída csv
Eu escrevi um script muito pequeno em python scrapy para analisar o nome, a rua e o número de telefone exibidos em várias páginas do site da página amarela. Quando executo meu script, acho que ele funciona sem problemas. No entanto, o único ...
Por que R não pode raspar esses links?
Estou tentando raspar links e cliques no URL listado abaixo. Consigo raspar "cliques" usando o xPath, mas tenho problemas ao raspar "links": esses dados são "NA". Alguém poderia explicar isso e como corrigi-lo? Aqui está o meu ...
erro de codificação com read_html
Estou tentando raspar umpágina [http://simec.mec.gov.br/painelObras/recurso.php?obra=17956]. Pensei em usar o pacote rvest. No entanto, estou preso na primeira etapa, que é usar read_html para ler o conteúdo. Aqui está o meu ...