Scrap разрешить все домены
Я виделэто опубликовать, чтобы scrap сканировал любой сайт без ограничения разрешенных доменов.
Есть ли лучший способ сделать это, например, использовать регулярное выражение в переменной разрешенных доменов, например:
allowed_domains = ["*"]
Я надеюсь, что есть какой-то другой способ, кроме как взломать рамки scrapy для этого.