Czy jest jakaś metoda na użycie oddzielnego rurociągu do złomowania dla każdego pająka?

Chcę pobrać strony internetowe pod inną domeną, co oznacza, że ​​muszę użyć innego pająka pod komendą „myspider crawl crawl”. Muszę jednak użyć innej logiki potokowej, aby umieścić dane w bazie danych, ponieważ zawartość stron internetowych jest inna. Ale dla każdego pająka muszą przejść przez wszystkie potoki zdefiniowane w pliku settings.py. Czy istnieje inna elegancka metoda używania oddzielnych potoków dla każdego pająka?

questionAnswers(3)

yourAnswerToTheQuestion