Ich versuche diese Seite mit scrapy zu kratzen:

http://www.barnesandnoble.com/s?dref=4815&sort=SA&startat=7391

und die Antwort, die ich erhalte, ist anders als das, was ich im Browser sehe. Die Browser-Antwort hat die richtige Seite, während die Scrapy-Antwort lautet:

http://www.barnesandnoble.com/s?dref=4815&sort=SA&startat=1

Seite. Ich habe es mit urllib2 versucht, habe aber immer noch das gleiche Problem. Jede Hilfe wird sehr geschätzt.