Scrapy / XPATH :如何仅从后代和自身中提取文本

Scrapy是一个基于Python的开源网络爬虫框架，用于快速、高效地从网页中提取数据。它提供了强大的工具和方法，使开发者能够轻松地定义爬取规则和处理提取的数据。

XPATH是一种用于在XML文档中定位元素的语言。在Scrapy中，XPATH常用于从HTML文档中提取数据。通过使用XPATH表达式，可以准确地定位到所需的元素，并提取其中的文本内容。

要仅从后代和自身中提取文本，可以使用以下XPATH表达式：

.//text()

这个表达式中的.表示当前节点，//表示选择后代节点。text()函数用于提取节点的文本内容。

举个例子，假设我们要从以下HTML代码中提取所有段落的文本内容：

<html>
  <body>
    <div>
      <p>第一个段落</p>
      <p>第二个段落</p>
    </div>
    <p>第三个段落</p>
  </body>
</html>

使用Scrapy和XPATH，可以这样提取文本：

import scrapy

class MySpider(scrapy.Spider):
    name = 'example'
    start_urls = ['http://example.com']

    def parse(self, response):
        paragraphs = response.xpath('.//p/text()').getall()
        for paragraph in paragraphs:
            print(paragraph)

上述代码中，response.xpath('.//p/text()').getall()使用了XPATH表达式.//p/text()来选择所有<p>标签的后代文本节点，并使用getall()方法提取所有文本内容。

推荐的腾讯云相关产品：腾讯云爬虫托管服务（https://cloud.tencent.com/product/sps）

以上是关于Scrapy和XPATH如何仅从后代和自身中提取文本的完善且全面的答案。