Результаты поиска по запросу "scrapy"

3 ответа

из scrapy.selector ошибка селектора импорта

Я не могу сделать следующее: from scrapy.selector import SelectorОшибка: Файл "/Desktop/KSL/KSL/spiders/spider.py", строка 1, из scrapy.selector import Selector ImportError: невозможно импортировать имя Selector Как будто LXML не установлен на ...

1 ответ

Не могли бы вы добавить пример кода? Я много искал о том, как реализовать эту информацию, и ничего не получил, кроме головной боли.

аюсь очистить данные из выпадающего меню ...

0 ответов

Заранее спасибо!

я есть многопроцессорная функция в Python, как описано ниже в Scrapy, которую нужно исправить. Не могли бы вы сначала выполнить проверку run_spider (), чтобы она не запускалась, если response.css ('div.quote') Результат пуст? Прямо сейчас он все ...

ТОП публикаций

1 ответ

 сделаем все

у все вопросыВот [https://stackoverflow.com/search?q=rename%20images%20scrapy], но я пока не понимаю. На самом деле с кодом de ниже я делаю то, что мне нужно, кроме переименования изображения, поэтому я пытаюсь изменить имя вitems.py файл, ...

2 ответа

Чтобы найти и проанализировать все страницы в категории, вы можете использовать что-то вроде:

х пор я собрал данные с одной страницы. Я хочу продолжить до конца нумерации страниц. Кликните сюда [https://www.alibaba.com/catalog/agricultural-growing-media_cid144?page=1] просмотреть страницу Кажется, есть проблема, потому что href содержит ...

1 ответ

 а затем вы можете найти выходной текст в каталоге вашего проекта паука.

ся, мне не хватает чего-то очень простого. Все, что я хочу сделать, это использовать; в качестве разделителя в экспортере CSV вместо,. Я знаю, что экспортер CSV передает kwargs автору csv, но я не могу понять, как передать этот разделитель. Я ...

1 ответ

@JebaseelanRavi, не могли бы вы опубликовать полный трекбек на своего рода пастбине или открыть новый вопрос и вставить его туда? Я никогда не видел эту ошибку раньше :)

ользую scrapy для получения сообщения (url) из RabbitMQ, но когда я использую yield для вызова метода parse, передавая мой url в качестве параметров. Программа не входит в метод обратного вызова. Ниже приведен следующий код моего паук # -*- ...

2 ответа

Scrapy: передача элемента между методами

Предположим, у меня есть Bookitem, мне нужно добавить к нему информацию как на этапе анализа, так и на этапе детализации def parse(self, response) data = json.loads(response) for book in data['result']: item = BookItem(); item['id'] = book['id'] ...

22 ответа

Не удается установить Lxml на Mac OS X 10,9

Я хочу установить Lxml, чтобы потом установить Scrapy. Когда я обновил свой Mac сегодня, он не позволил мне переустановить lxml, я получил следующую ошибку: In file included from ...

1 ответ

, Вы должны попробовать это, я думаю. GL!

аюсь сломатьcaptcha в форме с веб-сайта, но эта капча является динамической, у нее нет URL, вместо этого она имеет что-то вроде этого src="captcha?accion=image"Какой лучший вариант здесь? Я читал что-то вроде использования промежуточного ...