from scrapy.exceptions import DropItem


class YourPersonalPipeline(object):

    def process_item(self, item, spider):
        pass
Scrapy, как игнорировать элементы с пустыми полями с помощью загрузчика