Selenium headless browser webdriver [Errno 104] Verbindung von Peer zurückgesetzt

Ich versuche, Daten von den folgenden URLs zu entfernen. Aber Selen versagt, wenndriver.get(url) Manchmal ist der Fehler[Errno 104] Connection reset by peer, manchmal[Errno 111] Connection refused. An seltenen Tagen funktioniert es gut und auf meinem Mac mit echtem Browser funktioniert jedes Mal die gleiche Spinne einwandfrei. Das hängt also nicht mit meinem @ zusammspider.

Habe schon viele Lösungen ausprobiert, wie Warten auf Selektoren auf der Seite, implizites Warten, Verwenden von Selen-Anfragen, um korrekte Anfrage-Header zu übergeben, usw. Aber nichts scheint zu funktionieren.

http://www.snapdeal.com/offers/deal-of-the-day
https://paytm.com/shop/g/paytm-home/exclusive-discount-deals

Ich benutzepython, selenium & headless Firefox webdriver um das zu erreichen. Das OS istcentos 6.5.

Hinweis Ich habe vieleAJAX dicke Seiten, die erfolgreich geschabt werden, sind unten aufgeführt.

http://www.infibeam.com/deal-of-the-day.html, http://www.amazon.in/gp/goldbox/ref=nav_topnav_deals

Bereits viele Tage damit verbracht, das Problem ohne Erfolg zu debuggen. Jede Hilfe wäre dankbar.

Antworten auf die Frage(6)

Ihre Antwort auf die Frage