Resultados da pesquisa a pedido "screen-scraping"
Firefox / Webkit sem script e com script no linux?
Estou procurando automatizar algumas interações na Web, como o download periódico de arquivos de um site seguro. Isso basicamente envolve digitar meu nome de usuário / senha e navegar para o URL apropriado. Eu tentei scripts simples em Python, ...
Análise intensiva da CPU com scrapy
A seção CONCURRENT_ITEMS em http://doc.scrapy.org/en/latest/topics/settings.html#concurrent-items [http://doc.scrapy.org/en/latest/topics/settings.html#concurrent-items]define como: Número máximo de itens simultâneos (por resposta) a serem ...
escrevendo e salvando arquivo CSV a partir da raspagem de dados usando python e Beautifulsoup4
Estou tentando extrair dados do site PGA.com para obter uma tabela de todos os campos de golfe nos Estados Unidos. Na minha tabela CSV, quero incluir o nome do campo de golfe, endereço, propriedade, site e número de telefone. Com esses dados, ...
API de pesquisa de trem ferroviário da Índia [fechada]
Existe alguma API fornecida pela Indian Railways para pesquisar sua rede de trens, horários etc. Existem muitos sites por aí que mostram horários etc. Pesquisei no Google, mas não consegui encontrar nenhuma informação sobre serviços da Web ou ...
Alternativas ao Selenium / Webdriver para preencher campos ao raspar sem cabeça com Python?
Com Python 2.7 eu estou raspando comurllib2e quando algum Xpath é necessário, lxmltambém. Estávelozes, e como raramente preciso navegar pelos sites, essa combinação funciona bem. Na ocasião, geralmente, quando chego a uma página que exibe apenas ...
Mecanizar para Python 3.x
existe alguma maneira de usar o mecanizar com Python 3.x? Ou existe algum substituto que funcione no Python 3.x? Estou procurando há horas, mas não encontrei nada :( Estou procurando uma maneira de acessar o site com Python, mas o site ...