函数不在scrapy/webcrawler上调用

函数不在scrapy/webcrawler上调用是指在使用scrapy或其他网络爬虫框架时，函数不是直接在爬虫程序中调用的情况。

通常情况下，爬虫程序会定义一个或多个爬虫类，这些类继承自框架提供的基类，并且会定义一些回调函数来处理爬取到的数据。这些回调函数会在框架内部的事件触发时被调用，例如当爬虫发起请求并获取到响应时，会触发回调函数来处理响应数据。

在这种情况下，如果想要调用其他函数，可以将这些函数定义在爬虫类中的其他方法中，然后在回调函数中通过调用这些方法来间接调用其他函数。这样可以保证函数的执行顺序和爬虫框架的事件触发逻辑一致，避免出现错误或不可预测的行为。

举例来说，如果想要在爬虫程序中调用一个名为process_data的函数来处理爬取到的数据，可以将process_data定义在爬虫类的其他方法中，例如parse方法。然后在parse方法中调用process_data方法来处理数据。这样当爬虫框架触发parse方法时，process_data方法也会被调用。

下面是一个示例代码：

import scrapy

class MySpider(scrapy.Spider):
    name = 'myspider'

    def parse(self, response):
        # 爬取到数据后调用process_data方法处理数据
        self.process_data(response.text)

    def process_data(self, data):
        # 处理数据的逻辑
        pass

在上述代码中，parse方法是scrapy框架中的一个回调函数，当爬虫发起请求并获取到响应时，该方法会被调用。在parse方法中，我们通过self.process_data来调用process_data方法来处理数据。

需要注意的是，由于爬虫框架的工作方式和事件触发机制可能有所不同，具体的调用方式可能会有所差异。因此，在使用具体的爬虫框架时，建议查阅相关文档或官方文档以了解正确的函数调用方式。