Download einer vollständigen Seite mit scrapy
Ich möchte den Inhalt mit scrapy auf einer ganzen Seite herunterladen.
it Selen ist das ganz einfach:
import os,sys
reload(sys)
sys.setdefaultencoding('utf8')
from selenium import webdriver
url = 'https://es.wikipedia.org/wiki/Python'
driver = webdriver.Firefox()
driver.get(url)
content = driver.page_source
with open('source','w') as output:
output.write(content)
Aber Selen ist viel langsamer als Scrapy.
Ist es ein einfacher Weg, um in Scrapy zu tun?
Ich möchte den Code jeder Seite in einem anderen Dateitext speichern, nicht als CSV- oder JSON-Datei. Auch wenn es möglich ist, ohne ein Projekt zu erstellen, scheint dies für eine so einfache Aufgabe ein wenig übertrieben zu sein.