allowed_domains = [DOMAIN]
start_urls = [URL]

def parse(self, response):
    hxs = HtmlXPathSelector(response)
for url in hxs.select('//a/@href').extract():
    if not (url.startswith('http://') or url.startswith('https://')):
        url = URL + url
print(url)
yield Request(url, callback=self.parse)
Как использовать модуль Python Scrapy для отображения всех URL-адресов с моего веб-сайта?