Gibt es eine Liste bekannter Webcrawler? [geschlossen]

WhatsApp API (Java / Python) [geschlossen]

Ich suche WhatsApp API, vorzugsweise eine Python- oder Java-Bibliothek.ich habe es versuchtYowsup, konnte aber meine Nummer nicht eintragen lassen; Ich wohne...

Fecebook Messenger Bot in PHP reagiert nicht immer auf Benutzer

Ich habe einen relativ einfachen Facebook Messenger Bot in PHP für Forschungszwecke: $access_token = "xxxxxxx"; $challenge = $_REQUEST['hub_challenge']; $verify_token = $_REQUEST['hub_verify_token']; if ($verify_token ...

Alle Bots mit htaccess apache umleiten

Welche .htaccess-Umschreibung soll ich verwenden, um bekannte Bots zu erkennen, zum Beispiel die großen: altavista, google, bing, yahoo Ich weiß, ich kann für ihre IPS oder Hosts überprüfen, aber gibt es einen besseren Weg?

Kann ich mit WGET eine Sitemap einer Website erstellen, deren URL angegeben ist?

Ich benötige ein Skript, das eine Website erkennen und die Liste aller gecrawlten Seiten im Nur-Text-Format oder in einem ähnlichen Format zurückgeben kann. die ich als sitemap bei suchmaschinen einreiche. Kann ich mit WGET eine Sitemap einer ...

Bot Framework - Anmeldekarte, wie bekomme ich das Authentifizierungsergebnis

Arbeit mit Microsoft Bot Framework V3 habe ich angefangen, Anmeldekarten zu verwenden. Ich habe ein einfaches Ausschneiden und Einfügen von einer Beispiel-Codepage in meinen Code durchgeführt und sagen wir, es funktioniert ...

Xcode Server Simulator wartet nach einer Wartezeit von 120 Sekunden nicht me

Ich arbeite daran, Xcode Server für die kontinuierliche Integration in Betrieb zu nehmen. Auf meinem Entwicklungscomputer wird Xcode 6.3.2 ausgeführt, und OS X Server 4.1 wird auf einem iMac mit der neuesten Version von Yosemite ausgeführt. Ich ...

CasperJS: Proxy-Optionen im Code konfigurieren

Ich habe mich gefragt, wie wir cli-Parameter in unserem Code setzen können und nicht, indem wir sie wie folgt am Ende unseres Befehls einfügen: casperjs casper_tor.js --proxy=127.0.0.1:9050 --proxy-type=socks5Ich habe solche Dinge getestet, aber ...

Wie füge ich einen Bot zu einer Telegrammgruppe hinzu?

Ich habe versucht, einen Bot zu meiner Telegrammgruppe in Android Device hinzuzufügen, kann dies jedoch nicht. Ich habe versucht, @bot_name, / bot_name, aber es funktioniert nicht. Kann mir jemand sagen, ob es möglich ist, der Gruppe einen Bot ...

Wie kann ein Selen / Ruby-Bot warten, bevor er eine Aktion ausführt?

Ich erstelle einen Selenium / Ruby-Web-Bot, der auf Elemente klickt. Das Problem ist, dass manchmal nicht genügend Zeit zum Laden der Seite vorhanden ist, bevor der Bot feststellt, dass das Element nicht gefunden werden kann. Auf welche Weise ...