スパイダー — Scrapy 1.2.2 ドキュメント # -*- coding: utf-8 -*- from scrapy.spiders import SitemapSpider class MySpider(SitemapSpider): name = 'wired_sitemap' # XMLサイトマップのURLのリスト。 # robots.txtのURLを指定すると、Sitemapディレクテ…