Scrapy: перейдите по ссылке, чтобы получить дополнительные данные об элементе?
У меня нет конкретной проблемы с кодом, я просто не уверен, как логически решить следующую проблему с помощью платформы Scrapy:
Структура данных, которые я хочу очистить, обычно представляет собой строку таблицы для каждого элемента. Достаточно просто, верно?
В конечном итоге я хочу очиститьзаглавие, Срок сдачи, а такжеподробности для каждого ряда.заглавие а такжеСрок сдачи немедленно доступны на странице ...
Ноподробности сами по себе их нет в таблице, а есть ссылка на страницу, содержащую детали (если это не имеет смысла, вот таблица):
|-------------------------------------------------|
| Title | Due Date |
|-------------------------------------------------|
| Job Title (Clickable Link) | 1/1/2012 |
| Other Job (Link) | 3/2/2012 |
|--------------------------------|----------------|
Боюсь, я до сих пор не знаю, как логистически передать элемент с помощью обратных вызовов и запросов, даже после прочтенияCrawlSpider раздел документации Scrapy.