So erhalten Sie Crawl-Inhalte in Crawljax
Ich habe eine dynamische Webseite mit Crawljax gecrawlt. Ich kann in der Lage sein, aktuelle ID, Status und Dom zu crawlen. aber ich kann den Website-Inhalt nicht bekomme
CrawljaxConfigurationBuilder builder =
CrawljaxConfiguration.builderFor("http://demo.crawljax.com/");
builder.addPlugin(new OnNewStatePlugin() {
@Override
public String toString() {
return "Our example plugin";
}
@Override
public void onNewState(CrawlerContext cc, StateVertex sv) {
LOG.info("Found a new dom! Here it is:\n{}", cc.getBrowser().getStrippedDom());
String name = cc.getCurrentState().getName();
String url = cc.getBrowser().getCurrentUrl();
System.out.println(cc.getCurrentState().getDom());
System.out.println("New State: " + name + "; url: " + url);
}
});
CrawljaxRunner crawljax = new CrawljaxRunner(builder.build());
crawljax.call();
Wie bekomme ich dynamischen / Java-Skript-Webseiteninhalt ..