Документ Scrapy говорит, что:

Scrapy поставляется со встроенным сервисом, который называется «Scrapyd», который позволяет вам развертывать (или загружать) ваши проекты и управлять их пауками с помощью веб-сервиса JSON.

есть ли какие-то преимущества в комфортности использования скрапа?