Документ Scrapy говорит, что:

Scrapy поставляется со встроенным сервисом под названием «Scrapyd», который позволяет вам развертывать (иначе говоря, загружать) свои проекты и управлять их пауками с помощью веб-службы JSON.

есть ли какие-то преимущества в комфортности использования скрапа?