如何使用CrawlSpider通过以下链接抓取整个网站？

import scrapy
from scrapy.spiders import CrawlSpider, Rule
from scrapy.linkextractors import LinkExtractor

class MySpider(CrawlSpider):
    name = 'my_spider'  # 设置爬虫的名称

    # 设置爬取的起始链接
    start_urls = ['https://example.com']

    # 定义匹配链接的规则
    rules = (
        Rule(LinkExtractor(allow=()), callback='parse_item', follow=True),
    )

    def parse_item(self, response):
        # 在这里编写解析网页的代码
        # 提取需要的数据并进行处理
        pass

rules = (
    Rule(LinkExtractor(allow=()), callback='parse_item', follow=True),
)

def parse_item(self, response):
    # 在这里编写解析网页的代码
    # 提取需要的数据并进行处理
    pass

scrapy crawl my_spider