Как я могу безопасно проверить, пуст узел или нет? (Symfony 2 Crawler)

Как сканировать Facebook на основе информации о дружбе?

Я аспирант, чьи исследования сложная сеть. Я работаю над проектом, который включает анализ связей между пользователями Facebook. Можно ли написать сканер для Facebook на основе информации о дружбе? Я огляделся, но пока не нашел ничего полезного. ...

Веб-сканер Разбор PHP / Javascript ссылок?

В настоящее время я использую HTML Agility Pack в C # для веб-сканера. Мне удалось избежать многих проблем (недопустимые URI, такие как ссылки "/extra/u...

Выход:

ался извлечь текст таблицы сайта вместе с ее ссылкой из данной таблицы (которая находится на site1.com) на мою страницу php, используя веб-сканер.Но, к сожал...

Законно ли сканировать Amazon? [закрыто]

Я хочу получить конкретную информацию от Amazon, например, название продукта и описание! Законно ли ползать амазонка? или Амазон предоставляет любой API для ...

Разница между BeautifulSoup и Scrapy Crawler?

Я хочу сделать сайт, который показывает сравнение между Amazon и E-Bay цены продукта. Что из этого будет работать лучше и почему? Я немного знаком сBeautiful...

Как мне сделать простой сканер в PHP?

php crawl - включен JavaScript

Добрый день, кто-нибудь знает способ создания паука, который действует так, как будто у него включен JavaScript? PHP-код: file_get_contents("http://www.google.co.uk/search?hl=en&q=".$keyword."&start=".($x*10)."&sa=N") он будет получать выходные ...

Что означает знак доллара в robots.txt

Apache Nutch 2.1 другой идентификатор партии (ноль)

Я сканирую несколько сайтов с Apache Nutch 2.1. Во время сканирования я вижу следующее сообщение на многих страницах: ех. ...