Scrap разрешить все домены

Я виделэто опубликовать, чтобы scrap сканировал любой сайт без ограничения разрешенных доменов.

Есть ли лучший способ сделать это, например, использовать регулярное выражение в переменной разрешенных доменов, например:

allowed_domains = ["*"]

Я надеюсь, что есть какой-то другой способ, кроме как взломать рамки scrapy для этого.

Ответы на вопрос(2)

Ваш ответ на вопрос