Пользовательский поиск AFAIK не позволяет выполнять поиск по всей сети, только по выбранным доменам. Точкой поиска может быть просмотр всей сети :)

ел бы периодически проверять, какие субдомены перечислены в Google.

Чтобы получить список поддоменов, я ввожу «site: example.com» в поле поиска Google - в нем перечислены все результаты поддоменов (более 20 страниц для нашего домена).

Каков наилучший способ извлечь только URL-адреса адресов, возвращаемых поиском «site: example.com»?

Я думал о написании небольшого скрипта на Python, который будет выполнять вышеуказанный поиск и повторно проверять URL-адреса из результатов поиска (повторить на всех страницах результатов). Это хорошее начало? Может ли быть лучшая методология?

Приветствия.

Ответы на вопрос(2)

Ваш ответ на вопрос