Buscar a origem da página usando HtmlUnit: a URL ficou presa

Proteção contra a raspagem da Web

Seletor de XPath Repetitivo repete dados

Como lidar com IncompleteRead: em python

usando Perl para raspar um site

Por que Scrapy retorna um Iframe?

eu quero rastejaresse site [http://www.ooshop.com/courses-en-ligne/Home.aspx]por Python-Scrapy eu tento isso class Parik(scrapy.Spider): name = "ooshop" allowed_domains = ["http://www.ooshop.com/courses-en-ligne/Home.aspx"] def ...

Raspar o Google Notícias com BeautifulSoup retorna resultados vazios

Estou tentando raspar o Google Notícias usando o seguinte código: from bs4 import BeautifulSoup import requests import time from random import randint def scrape_news_summaries(s): time.sleep(randint(0, 2)) # relax and don't let google be angry ...

Executando JavaScript raspado com cheerio

Eu tenho uma página web na qual existem algumas APIs JS que não alteram o dom, mas retornam alguns números. Eu gostaria de escrever um aplicativo NodeJS que ...

É possível executar o jQuery no lado do servidor?

Estou trabalhando em web page scraping tem paginação AJAX implementado, Desde site é desenvolvido em asp página ie com extensão .aspx Eu tentei enviar formul...

Use getElementById no HTMLElement em vez de HTMLDocument