Resultados da pesquisa a pedido "screen-scraping"
JSON Scraping - Converta, tempo militar para o tempo padrão via Javascript
Estou raspando dados JSON de um URL. O tempo é militar e eu queria saber se existe uma maneira de recuperar no lado do cliente para convertê-lo no horário padrã Aqui está o JSON: [ { SaturdayClose: "21:00", SaturdayOpen: "10:00", SundayClose: ...
Como usar o método WebClient.DownloadDataAsync () neste contexto?
Meu plano é que um usuário escreva um título de filme no meu programa e meu programa irá puxar as informações apropriadas de forma assíncrona para que a inte...
JSoup - Selecionar todos os comentários
Quero selecionar todos os comentários de um documento usando JSoup. Eu gostaria de fazer algo assim: for(Element e : doc.select("comment")) { System.out.println(e); }Eu tentei isso: for (Element e : doc.getAllElements()) { if (e instanceof ...
C # WebClient - Ver pergunta de origem
Estou usando um C # WebClient para postar detalhes de login em uma página e ler todos os resultados.A página que estou tentando carregar inclui flash (que, n...
scrapy pode ser usado para raspar conteúdo dinâmico de sites que usam AJA
Estive aprendendo Python recentemente e estou mergulhando minha mão na criação de um raspador da Web. Não é nada chique; seu único objetivo é obter os dados de um site de apostas e colocá-los no Excel. A maioria dos problemas é solucionável e ...
Selecione todos os <p> 's dos filhos de um Nó usando HTMLAgilityPack
Eu tenho o seguinte código que estou usando para obter uma página html. Torne os URLs absolutos e faça com que os links sejam seguidos e abertos em uma nova janela / guia. Meu problema é em torno da adição dos atributos ao<a>s. string url = ...
Usando Ruby com o Mechanize para fazer login em um site
Preciso raspar dados de um site, mas é necessário primeiro fazer o login. Eu tenho usado o hpricot para raspar com sucesso outros sites, mas sou novo no mecanize e estou realmente desconcertado com a maneira de trabalha Vejo este exemplo ...
Como posso pegar CData fora de BeautifulSoup
Eu tenho um site que estou raspando que tem uma estrutura semelhante ao seguinte. Eu gostaria de poder pegar as informações do bloco CData.Estou usando o Bea...
Como usar o Goutte
Questão:Não é possível entender completamente o scraper da Web do Goutte.Pedido:Alguém por favor pode me ajudar a entender ou fornecer código para me ajudar ...