соскабливание амазонки

Веб-скрапинг Amazon с помощью Scrapy

1. Что такое Scrapy CrawlSpider? CrawlSpider - это производный класс Scrapy, и принцип работы класса Spider заключается в том, чтобы перебирать только веб-страницы в списке start_url. В отличие от этого, класс CrawlSpider определяет некоторые правила, чтобы обеспечить удобный механизм для перехода по ссылкам - извлечения ссылок из скраппинга веб-страниц Amazon...

Читать далее