3

получается так

введите сюда описание изображения

article,size

9485,"40,41,43,45"

9494,"42,43,44"

,

хотелось бы чтобы всё было в разных ячейках, как внизу на изображении

введите сюда описание изображения

article;size
;
9485;"""40,41,43,45"""
;
9494;"""42,43,44"""
;
,;

вот сам код

import scrapy

class OutItem(scrapy.Item):
   size = scrapy.Field()
   article = scrapy.Field()



def parse(self, response):
    for div in response.xpath('//div[@class="right"]'):
        item = OutItem()
        item['size'] =div.xpath('//div[@class="option"]//div//label/text()').extract()
        item['article'] = div.xpath('//div[@class="description"]//div/text()').extract()

        yield item

команда

scrapy crawl spidy -t csv -o spidy.csv --loglevel=INFO

P.s заранее спасибо что уделили внимание

5
  • спасибо что отозвались, я отредактировал 3 фев 2018 в 19:19
  • попытка номер два) 3 фев 2018 в 21:42
  • 1
    вывод выглядит нормально как есть. Когда вы в GUI открываете просто подходящий csv диалект выберите. В качестве альтернативы, можно другой диалект сразу при экспорте использовать в scrapy. Связанный вопрос stackoverflow.com/q/42658875/4279
    – jfs
    3 фев 2018 в 21:49
  • При открытии csv-шки укажи, что разделитель запятая а не точка с запятой.
    – tonal
    4 фев 2018 в 6:52
  • не могли бы привести код как мне это сделать или пример, так нашёл решение но оно не удобное, на данном сайте normcsv.c3h.ru 4 фев 2018 в 10:20

1 ответ 1

0

Попробуй писать в файл через pipeline, и я бы советовал использовать tsv или csv. Pipeline нужно будет указать в settings и при запуске краулера из CLI указать только scrapy crawl <SPIDER_NAME>

Ваш ответ

Нажимая на кнопку «Отправить ответ», вы соглашаетесь с нашими условиями использования и подтверждаете, что прочитали и поняли наши политику конфиденциальности и нормы поведения.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.