使用Scrapy不能从父div抓取子xpath
Scrapy是一个基于Python的开源网络爬虫框架，用于快速、高效地从网页中提取数据。它提供了强大的抓取和数据提取功能，可以帮助开发者快速构建爬虫程序。
在使用Scrapy进行数据抓取时，如果要从父div中抓取子xpath，可以通过以下步骤实现：
- 首先，使用Scrapy创建一个爬虫项目，并定义一个爬虫类。
- 在爬虫类中，使用Scrapy的Selector模块选择父div元素。Selector模块提供了一组强大的选择器，可以根据XPath、CSS选择器等方式选择网页中的元素。
- 使用XPath表达式选择子div元素。XPath是一种用于在XML和HTML文档中定位节点的语言，通过XPath表达式可以准确定位到需要的子元素。
- 提取子div元素中的数据。可以使用Scrapy提供的extract()方法提取元素的文本内容，或者使用extract_first()方法提取第一个匹配的元素。
使用Scrapy进行数据抓取的优势包括：
- 高效性：Scrapy采用异步处理方式，可以同时处理多个请求，提高了数据抓取的效率。
- 可扩展性：Scrapy提供了丰富的中间件、管道等扩展机制，可以方便地对数据进行处理和存储。
- 灵活性：Scrapy支持多种数据提取方式，包括XPath、CSS选择器等，可以根据实际需求选择最合适的方式。
- 自动化：Scrapy提供了自动处理重定向、cookies等功能，减少了开发者的工作量。
使用Scrapy进行数据抓取的应用场景包括：
- 网络爬虫：可以用于抓取各类网站的数据，如新闻、商品信息等。
- 数据采集：可以用于采集大量的结构化数据，如舆情数据、股票数据等。
- 数据分析：可以用于获取特定网站的数据，并进行数据分析和挖掘。
腾讯云提供了一系列与云计算相关的产品，其中与数据抓取相关的产品包括：
- 腾讯云CVM（云服务器）：提供弹性的计算资源，可以用于部署和运行Scrapy爬虫程序。 产品介绍链接：https://cloud.tencent.com/product/cvm
- 腾讯云COS（对象存储）：提供高可靠、低成本的云存储服务，可以用于存储爬取到的数据。 产品介绍链接：https://cloud.tencent.com/product/cos
- 腾讯云CDN（内容分发网络）：提供全球加速的内容分发服务，可以加速数据的传输和访问。 产品介绍链接：https://cloud.tencent.com/product/cdn
请注意，以上只是腾讯云提供的一些相关产品，其他云计算品牌商也提供类似的产品和服务。
相关·内容
1回答
目的:从div类list_area daily_all中抓取文本数据。 使用scrapy shell，我首先“抓取”了我想要抓取数据的网站：https://comic.naver.com/webtoon/weekday.nhn 使用'scrapy shell‘脚本：scrapy shell 'https://comic.naver.com/webtoon/weekday.nhn' 使用xpath，我想从div类"list_area daily_all“中抓取所有文本数据： response.xpath("//div[@id='wrap'
浏览 18提问于2019-06-10得票数 2
我以前用过Scrapy抓取过几个网站，所以我很熟悉它的语法，似乎不能捕获下面的class元素： ? 这是我最近尝试的方法： import scrapy
from scrapy.selector import Selector
import black
class PeopleperhourSpider(scrapy.Spider):
name = 'peopleperhour'
start_urls = ['https://www.peopleperhour.com/hire-freelancers/technology-programming&
浏览 28提问于2021-04-05得票数 0
来自以下源代码：
<html>
...
<div>.......</div>
<script bounce ="bla">....</script>
<div>.......</div>
.
.
n
.
<script bounce="foo">....],[null,"bla bla"]........</script>
.
.
.
</html>
我想提取(bla bla)，它肯定是在(，null，")之后出现的，直
浏览 30提问于2018-07-20得票数 1
回答已采纳
1回答
使用Scrapy解析文档
、、、
我有一个问题，我想解析一个网站，并从它抓取每个文章的链接，但问题是Scrapy没有抓取所有的链接和抓取其中的一些随机次数。
import scrapy
from tutorial.items import GouvItem
class GouvSpider(scrapy.Spider):
name = "gouv"
allowed_domains = ["legifrance.gouv.fr"]
start_urls = [
"http://www.legifrance.gouv.fr/affichCo
浏览 3提问于2016-02-03得票数 0
我正在学习Python scrapy，我在收集非常量html格式的信息时遇到了麻烦。 例如，在我试图抓取的网站上，一些是以下格式的： <div class="one">
<div class="two">
<p>hello</p>
</div>
</div> 而有些可能是以下格式： <div class="one">
<div class="two">
hello
</div>
</d
浏览 13提问于2020-12-26得票数 0
我正在抓取一个网站，在一个特定的地方寻找段落超过了大量的URL。我想要做的是为我正在访问的每个URL记录我在csv文件中抓取的段落的‘下一步’的URL。
首先，我使用网站的搜索语法列出了我想要抓取的所有网站。我正在按ISBN号查找书籍。我目前得到的是一个抓取的段落列表，就像我wanted...However它偶尔不起作用一样，所以我不能简单地将抓取的段落与我事后拥有的ISBN列表连接起来，因为它们不能完美地对齐。
我试着把一些代码放在“yield”括号里，但都没有用。有什么想法，或者其他不好的建议吗？
starts = []
for isbn in data:
starts.appen
浏览 6提问于2019-12-01得票数 0
我使用刮除外壳来提取以下网页的数据：
大多数数据都正常工作，但在较低的部分中有一个表，其中的内容(如PZN )。我似乎无法提取。
scrapy shell
fetch('https://www.apo-in.de/product/acc-akut-600-brausetabletten.24170.html')
>>> response.xpath('//*[@id="accordionContent5e95408f73b10"]/div/table/tbody/tr[1]/td/text()').extract()
返回：[
浏览 4提问于2020-04-14得票数 0
回答已采纳
我是一个非常新的网络抓取和尝试放弃一个例子。我在scrapy中使用以下代码: items.py文件
from scrapy.item import Item, Field
class StackoverflowItem(Item):
title = Field()
pass
和test.py
from scrapy.spider import BaseSpider
from scrapy.selector import HtmlXPathSelector
class MySpider(BaseSpider):
name = "stackspider
浏览 1提问于2014-08-06得票数 1
回答已采纳
2回答
抓取下一页的抓取循环
、、、
你好，我正在尝试进入单词抓取器和爬虫，但是我不明白为什么我的代码不能转到下一页和循环。 import scrapy
from scrapy import*
import scrapy
from scrapy import*
class SpiderSpider(scrapy.Spider):
name = 'spider'
start_urls = ['https://www.thehousedirectory.com/category/interior-designers-architects/london-interior-desi
浏览 27提问于2021-03-31得票数 0
回答已采纳
Javascript隐藏了一些元素，但是当我使用scrapy抓取数据时，这些元素会被抓取，就好像它们没有被Javascript隐藏一样。
链接1：链接2：
例如:当我使用Scrapy和xpath (//div@id='productDetails'/ul@class='details'/li@id='add_to_cart_li'/a@id='add_to_cart'/span@class='buy-txt')，抓取这两个链接时，我在两个链接中都得到了“立即购买”的文本，即使其中一个链接不包含“立即购买”文本。
浏览 0提问于2014-05-30得票数 0
我正在尝试用蟒蛇抓取imdb。然而，我无法从页面获取评级信息，如下所示：
我使用了下面的代码：
from scrapy.spiders import Spider
from scrapy.selector import Selector
from imdb.items import ImdbItem
class ImdbSpider(Spider):
name = "imdb"
allowed_domains = ["imdb.com"]
start_urls = [
"http://www.imdb.com
浏览 0提问于2016-04-27得票数 0
我有一个不能抓取分页链接的垃圾代码，我被卡住了。
该页面的来源是：
我的代码是：
import scrapy
class TelescopesSpider(scrapy.Spider):
name = 'telescopes'
allowed_domains = ['https://www.levenhuk.bg/']
start_urls = ['https://www.levenhuk.bg/katalog/teleskopi/?page=1']
download_delay = 3
def p
浏览 42提问于2020-02-17得票数 0
1回答
如何获取该页中每个广告的数据？
、、、、
我正在抓取这个页面以获取每个Ad：的数据
下面是我在刮擦壳中的代码：
scrapy shell "http://www.cars2buy.co.uk/business-car-leasing/Abarth/695C/"
for content in response.xpath('//*[@class="pitem"]/div[1]/div[2]/div[1]'):
print content.xpath('//*[@class="detail"]/p/text()[2]').extract()
浏览 1提问于2017-04-29得票数 1
回答已采纳
1回答
我想从snapdeal中抓取移动产品的功能。
//*[@id="productSpecs"]/div/div[2]/div[2]/div/table[1]/tbody/tr/td/table/tbody/tr/td[2]
//*[@id="productSpecs"]/div/div[2]/div[2]/div/table[1]/tbody/tr/td/table/tbody/tr/td[1]
这些是X路径。我可以看到结果通过刮刀扩展在谷歌chrome.But不能从刮取的结果。
from scrapy.spider import BaseSpider
# fro
浏览 1提问于2015-11-10得票数 0
回答已采纳
使用Python Scrapy，我尝试获取一个网页中的内容，该网页的节点如下： <div id="title">Title</div>
<ul>
<li>
<span>blahblah</span>
<div>blahblah</div>
<p>CONTENT TO EXTRACT</p>
</li>
<li>
<span>blahblah</span>
&l
浏览 34提问于2019-12-26得票数 0
回答已采纳
我试着用Scrapy和Python从网站上抓取一些数据。问题是我的搜索结果总是被切断。我在两台不同的电脑上试过这个。一种是使用windows 10，scrapy 1.4.0，python 2.7.13。另一个是使用Windows 7，scrapy 1.4.0，python 2.7.13。我在这两台电脑上的结果是一样的。
示例：(在命令行上使用scrapy )
1. scrapy shell "www.reddit.com"
2. ..... some output comes here
3. response.xpath('//div')
因此，在
浏览 3提问于2017-06-07得票数 0
回答已采纳
我正在尝试抓取this网站，我想要地址和联系方式，但我不知道为什么我没有得到输出，我想要的数据存在于响应中，但我无法抓取它，请告诉我我哪里做错了，我浪费了很多时间，只是卡住了 import scrapy
from scrapy.linkextractors import LinkExtractor
from scrapy.spiders import CrawlSpider, Rule
class MobilesSpider(CrawlSpider):
name = 'mobiles'
allowed_domains = ['www.vcsdata
浏览 11提问于2021-09-27得票数 1
回答已采纳
我尝试用Scrapy (1.5.0)- Python从网站上抓取数据。
项目目录：
stack/
scrapy.cfg
stack/
__init__.py
items.py
pipelines.py
settings.py
spiders/
__init__.py
stack_spider.py
这是我的items.py
imp
浏览 3提问于2018-06-06得票数 0
回答已采纳
1回答
在方法parse()中，蜘蛛爬行4个url，然后发送给parse_dir_contents()方法来抓取一些数据，但是只有第4个url被抓取，我不明白为什么它不刮其他3个url？
import scrapy
from v_one.items import VOneItem
import json
class linkedin(scrapy.Spider):
name = "linkedin"
allowed_domains = ["linkedin.com"]
start_urls = [
"https://in.lin
浏览 0提问于2016-06-25得票数 0
回答已采纳
我是一个全新的Scrapy新手，我可以在这里给你一些提示。我意识到有很多类似的问题，但似乎没有一个能解决我的问题。我有以下代码为一个简单的网络刮板写的： import scrapy
from ScriptScraper.items import ScriptItem
class ScriptScraper(scrapy.Spider):
name = "script_scraper"
allowed_domains = ["https://proplay.ws"]
start_urls = ["https://proplay
浏览 15提问于2020-06-12得票数 0
回答已采纳
1回答
我正在做网页抓取，但是我没有得到我期望的输出。 我正在学习网络抓取，还是个初学者。问题是，并不是所有的引用都被刮掉了。 import scrapy
class QuoteSpider(scrapy.Spider):
name = 'Quotes'
start_urls = [
'http://quotes.toscrape.com/'
]
def parse(self, response):
for quotes in response.selector.xpath("//div[@class=
浏览 11提问于2019-10-17得票数 0
回答已采纳
1回答
我想用刮伤来抓取完整的网站，但是现在它唯一的爬行单页。
import scrapy
from scrapy.http import HtmlResponse
from scrapy.contrib.spiders import CrawlSpider, Rule
from scrapy.contrib.linkextractors.sgml import SgmlLinkExtractor
from scrapy.selector import HtmlXPathSelector
from scrapy.contrib.exporter import JsonItemExporter
cla
浏览 0提问于2014-11-27得票数 1
2回答
我正试着用刮擦来刮一个网站。当我刮到一个特定的页面时，分页抓取是有效的，但是当我尝试用一次跳转分页刮掉所有的页面时，分页就不起作用了。
我尝试为分页创建一个额外的函数，但这并不能解决问题。所有的帮助都将不胜感激。我做错什么了？这是我的密码：
# -*- coding: utf-8 -*-
import scrapy
from scrapy.loader.processors import MapCompose, Join
from scrapy.loader import ItemLoader
from scrapy.http import Request
from avtogumi.it
浏览 1提问于2018-09-18得票数 1
回答已采纳
1回答
以下爬行链接
、、、
有以下蜘蛛：
import scrapy
from final.items import FinalItem
class ScrapeMovies(scrapy.Spider):
name='final'
start_urls = [
'https://www.trekearth.com/members/page1.htm?sort_by=md'
]
def parse(self, response):
for row in response.xpath('//table[@class
浏览 2提问于2018-05-18得票数 0
回答已采纳
1回答
我想用Scrapy从ICML程序中抓取文件，我的代码是
items.py
# -*- coding: utf-8 -*-
# Define here the models for your scraped items
#
# See documentation in:
# https://doc.scrapy.org/en/latest/topics/items.html
import scrapy
from scrapy.item import Item, Field
class PapercrawlerItem(scrapy.Item):
# define the fie
浏览 0提问于2019-06-18得票数 0
回答已采纳
我使用Scrapy从网站的第一页抓取信息，并将数据导出为.csv文件，如下所示：
scrapy crawl spidername -o data.csv
我想要获得form的输出：
{'Title': [u'Message'],
'Link': [u'url'],
'Text': [u'Hello World']}
{...........
.....} etc
但相反，我在一个{}中获得了所有内容，即
{[all 'Title' data],
[all 'Link&
浏览 1提问于2015-10-19得票数 0
1回答
我正在尝试抓取一个使用调用HTML的API的网站，因此为此，我需要抓取API，然后从API抓取HTML结果 我已经使用这篇文章设法获得了API响应，并从中获得了HTML。 resp = json.loads(response.text)
selector= scrapy.Selector(text=resp['results'], type="html") 而且它工作得很好，当我试图从页面获取属性时，我可以使用CSS或Xpath选择器来获取项 我现在要做的就是遍历选择器 for item in selector:
浏览 10提问于2020-12-16得票数 1
我正在尝试用scrapy和xpath从python的网页中抓取一些链接，但是我想抓取的元素是介于：：they和::after之间的，所以xpath看不到它们，因为它们不存在于HTML中，而是用javascript动态创建的。有没有办法去掉这些元素呢？
::before
<div class="well-white">...</div>
<div class="well-white">...</div>
<div class="well-white">...</div>
::a
浏览 2提问于2018-09-12得票数 2
2回答
我正在尝试从页面中抓取数据，并在分页链接之后继续抓取。
我要刮的页面是->
# -*- coding: utf-8 -*-
import scrapy
class AlibabaSpider(scrapy.Spider):
name = 'alibaba'
allowed_domains = ['alibaba.com']
start_urls = ['https://www.alibaba.com/catalog/agricultural-growing-media_cid144?page=1']
def
浏览 3提问于2018-09-09得票数 0
回答已采纳
我正在抓取下面的网站女演员的名字，排名和得分
我可以获得1条记录，但不能迭代查找其余记录
我可以像下面这样接收数据，但只有1条记录
{'Score'：u'41.0'，'Name'：U‘’Deepika‘，'Rank'：u'1'}
我想像上面那样提取所有记录
# -*- coding: utf-8 -*-
import scrapy
class ActressListSpider(scrapy.Spider):
name = 'actress_list'
allowed_domai
浏览 0提问于2019-06-30得票数 1
2回答
我正试着用Scrapy从一个商业网站上抓取。对于价格标签，我想删除"$"，但我的当前代码不起作用。
def parse(self, response):
for sel in response.xpath('//section[@class="items-box"]'):
item = ShopItem()
item['name'] = sel.xpath('a/div/h3/text()').extract()
item['price'] = sel
浏览 0提问于2016-05-11得票数 3
回答已采纳
我正在尝试使用python中的scrapy来抓取Feature，但是它提供了“None”--事实上，我已经尝试了3到4种方法来抓取，但是它们不起作用。请任何人帮助我，为什么我的代码没有给出源链接的图像，谢谢提前。
这是密码。
class NewsSpider(scrapy.Spider):
name = "cruisefever"
def start_requests(self):
url = input("Enter the article url: ")
yield scrapy.Reque
浏览 3提问于2022-10-15得票数 -1
回答已采纳
1回答
我正试图抓取一个网站上的数据，浏览器上的javascript似乎停下来获取电子邮件地址。 有没有人可以告诉我如何获得电子邮件地址？ 网址：https://directory.easternuc.com/publicDirectory from scrapy import cmdline
import scrapy
from tutorial.items import TutorialItem
class DemoSpider(scrapy.Spider):
name = "DemoSpider"
def start_requests(self):
浏览 15提问于2020-04-06得票数 0
在我的网络抓取项目中，我必须从中抓取足球比赛数据，以便从上面的url导航到比赛数据，我必须遵循url中具有散列的超引用：
<a href="#matches" data-toggle="tab">Matches</a>event
以下链接的标准抓取机制：
href = response.xpath("//a[contains(@href,'matches')]/@href").extract_first()
href = response.urljoin(href)
将生成一个不指向匹配数据的链接：
浏览 0提问于2018-10-07得票数 0
1回答
无法从url获得其他项目
、、、
我从中抓取了几个项目，但是它只从第一个产品中抓取项目，没有进一步循环。我知道我犯了一个简单的愚蠢的错误，但如果你能指出我在哪里弄错了，我会很感激的。
这是蜘蛛：
from scrapy.item import Item, Field
from scrapy.spider import BaseSpider
from scrapy.selector import Selector
import re
from zoomer.items import ZoomerItem
class ZoomSpider(BaseSpider):
name = "zoomSp"
浏览 3提问于2014-04-08得票数 3
回答已采纳
1回答
我试图从一个网站的几个页面中抓取不同的信息。在第16页之前，一切正常:页面被抓取，抓取，我的数据库中的信息存储，但是在第16页之后，它停止抓取，但继续抓取。我查看了这个网站，有470多个页面提供了信息。HTML标签是一样的，所以我不明白为什么它会停止抓取。
Python：
def url_lister():
url_list = []
page_count = 1
while page_count < 480:
url = 'https://www.active.com/running?page=%s' %page_count
浏览 0提问于2018-01-24得票数 4
嗨，有人能帮我，我似乎被困住了，我正在学习如何爬行和保存到mysql我们刮刮。我正在尝试抓取抓取所有的网站网页。从"start_urls“开始，但它似乎并不会自动爬行所有页面，而是使用pipelines.py保存到mysql中。当f= open("urls.txt")中提供urls时，它也会抓取所有页面，并使用pipelines.py保存数据。
这是我的密码
test.py
import scrapy
from scrapy.contrib.linkextractors.sgml import SgmlLinkExtractor
from scrapy.contrib.
浏览 6提问于2015-03-30得票数 0
回答已采纳
我正在尝试使用python Scrapy抓取一个网站。xpath表达式在从scrapy shell运行时提供所需的输出，但在从爬行器运行时不提供。未返回错误，但已进行调试爬网(200)。以下是我的代码：
import scrapy
import logging
from scrapy.linkextractors import LinkExtractor
from scrapy.spiders import CrawlSpider, Rule
class amazon(scrapy.Spider):
name = "automate"
start_urls = [
浏览 7提问于2017-01-05得票数 0
1回答
我知道这不是一个错误，但我不明白如何抓取启动印度网站，我试图点击一些网站在启动印度，但我不能点击他们，因为scrapy不能点击网站，无论我有什么信息都只能通过按那个链接来抓取。 import scrapy
from selenium import webdriver
import os
class ProductSpider(scrapy.Spider):
name = "product_spider"
allowed_domains = ['https://www.startupindia.gov.in/']
start_urls
浏览 14提问于2020-01-16得票数 1
1回答
我想使用scrapy从一个页面上的多个<li>中抓取所有的<ul>，我有一个for循环来获取当前<ul>中的所有<li>，我想要做的是从当前ul之前的<p>抓取文本，我想使用前面的-兄弟姐妹是方法，但我不能让它工作，有什么建议吗？
<p>some random text</p>
<ul>
<li> some random text </li>
<li> some random text </li>
<li> some
浏览 0提问于2019-03-30得票数 0
回答已采纳
我写这个爬虫是为了从google play上抓取应用的评论。我在这方面取得了部分成功。我只能提取名称、日期和评论。
我的问题:1.如何获得所有的评论，因为我只得到了41条。2.如何从div获取评级？
import scrapy
from scrapy.contrib.spiders import CrawlSpider, Rule
from scrapy.selector import Selector
from scrapy.contrib.linkextractors.sgml import SgmlLinkExtractor
from urlparse import urljoin
浏览 5提问于2015-04-24得票数 2
我正在设置一个代理抓取从一个网站，但我什么也得不到。 import scrapy
from scrapy.item import Field, Item
from scrapy.spiders import CrawlSpider, Rule
from scrapy.linkextractors import LinkExtractor
from scrapy.loader import ItemLoader
from scrapy.loader.processors import MapCompose
class ProxyServersPro(Item):
ip = scrap
浏览 17提问于2019-03-24得票数 1
回答已采纳
我是scrapy的新手。我想从网上抓取一些数据。我得到的html文档如下所示。
<div class="user-info">
<p class="user-img">
something in p tag
</p>
<em>text</em> data I want
<a href="#">
something in a tag
</a>
</div>
我只想获得文本数据，我只想
浏览 0提问于2017-06-08得票数 0
1回答
使用Python库Scrapy，我执行以下操作：
scrapy shell "http://www.dmoz.org/Computers/Programming/Languages/Python/Books/"
从那里，我想获得每个返回项目的单独链接+文本：
response.xpath('//div[@class="title-and-desc"]/a')
但是，只返回链接，而不返回文本。以下是返回内容的示例：
response.xpath('//div[@class="title-and-desc"]/a')
浏览 1提问于2016-11-28得票数 0
我想抓取链接的下一页：https://www.thetoptens.com/animals/，使用scrapy-selenium点击next按钮，但它抓取了链接的第一页。我也尝试过使用webdriver，但显示了相同的结果。 使用scrapy-selenium的代码： import scrapy
from scrapy_selenium import SeleniumRequest
from selenium.webdriver.common.by import By
from selenium.webdriver.support import expected_conditions as
浏览 35提问于2020-12-17得票数 1
1回答
其目的是使用Scrapy来抓取一个网站。我想要得到的内容在具有唯一4位数字id的div之间，如下所示：
<div id="3456" ...> Item 1 </div>
<div id="5643" ...> Item 2 </div>
<div id="8767" ...> Item 3 </div>
我需要知道如何在下面的命令中通用地定义4位数，这样我就可以转到每一项进行抓取。
for sel in response.xpath('//div[@id="
浏览 1提问于2015-06-19得票数 1
回答已采纳
3回答
我编写了以下脚本来从中抓取数据
import scrapy
class MySpider(scrapy.Spider):
name = 'jobs'
start_urls = ['https://www.freelancer.in/jobs/python_web-scraping_web-crawling/']
def parse(self, response):
for title in response.xpath('//div[@class = "JobSearchCard-primary-he
浏览 1提问于2017-10-26得票数 0
2回答
我是scrapy的新手。我想从网上抓取一些数据。我得到的html文档如下所示。
dom style1:
<div class="user-info">
<p class="user-name">
something in p tag
</p>
text data I want
</div>
dom style2:
<div class="user-info">
<div>
<p class="us
浏览 3提问于2017-06-07得票数 5
回答已采纳
我有一个爬虫，我想要抓取一篇我感兴趣的文章，然后将标题和内容存储在字典中。但是，当我抓取正文时，它会返回html代码，我希望将其转换为文本(包括文章中的所有h1和href )，但是当我使用.getall()时，它会返回一个空列表。我如何将所有这些都转换为文本，同时仍然将所有内容保留在文章中。
在scrapy shell中，我已经尝试过，它返回了一个包含所有html代码的大列表。
response.css("div.rich-text-content").getall()
下面是我为了完成这项任务而创建的初始蜘蛛…
class ArticleSpider(scrapy
浏览 0提问于2019-08-14得票数 0
2回答
找不到Xpath
、、、
我试图使用scrapy抓取IMDB前250个电影，并在期间坚持查找xpath，我需要提取每个电影的"2“、"h”、"44“和"m"。网站链接：
以下是HTML的图像：
我尝试过这个Xpath，但它并不准确：
//li[@class ='ipc-inline-list__item']/following::li/text()
浏览 3提问于2022-02-25得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
