我想在一个Scrapy项目中转换一个CSS选择器为XPath。`>>> for quote in response.css("div.quote"):
...text = quote.css("span</
浏览 0提问于2019-01-23得票数 1
<span>cylinders: <b>6 cylinders</b></span>\n <br>\n\n\n\n\n
> <span>drive: <b>fwd</b></span> <span>odometer: <b>99000</b></span
浏览 17提问于2020-09-14得票数 0
我正在使用Scrapy制作一个爬虫，并想知道为什么我的xpath在CSS选择器中不能工作？我想从这个html中获得提交的数量： <a data-pjax="" href="/samthomson/flot/commits/master"></span</em
浏览 1提问于2015-09-19得票数 1
回答已采纳
3回答
我正在努力搜集价格信息，网站的HTML如下所示 <i>$</i> <i>.00<i>我想要999。(我不想要美元符号或.00)我现在有
product_price_sn = product.css('.def-price i')
浏览 0提问于2020-07-11得票数 3
回答已采纳
我试着使用以下站点学习response.xpath和response.css：for quote in response.css("div.quote"):这只会得到一个值。但是，如果我使用xpath：
浏览 2提问于2018-06-02得票数 2
回答已采纳
我测试并试用了刮伤外壳中的选择器，它们都能工作。当我只使用球员的网址线，它工作。但是当爬行器从代码中爬行时，它返回None，并且我以这种方式获取播放器的urls。= info_table.xpath('//span[contains(text(), "Player agent:")]/following-sibling::span/spa
浏览 6提问于2022-09-29得票数 0
我使用scrapy (https://scrapy.org/)抓取了很多网站(将近300个)，并将标题和日期保存在json中。标题主要在第一个H1的网站上。但是日期是棘手的。现在，我使用这个XPath选择器： item['date'] = response.xpath("//time/text()").get() 但该网站使用不同类型的
浏览 12提问于2020-11-11得票数 1
回答已采纳
我正在尝试使用Scrapy创建自己的价格监视器，但似乎找不到一种使用CSS选择器检索页面价格的方法？这里的最佳实践是什么？我也不能通过XPath得到它。这是我遇到麻烦的页面：Udemy 价格似乎是在<span>中，没有任何类，例如： <span class>$129.99</span>.
浏览 20提问于2020-11-03得票数 0
回答已采纳
2回答
我对Scrapy、Python和面向对象编程比较陌生，所以如果我遇到任何术语错误或不清楚的地方，我深表歉意。目前，我正在使用Scrapy的选择器抓取数据，并使用lxml修改响应。但是，我希望使用Scrapy的方法来进行修改，而不
浏览 2提问于2015-07-19得票数 6
1回答
我当前所做的是查找属于具有类值category-navigation--link的"a“标记的所有"href”值response.xpath我可以让我的脚本工作，但我仍然很好奇为什么CSS选择器可以工作，而xpath不能。下面是我做过的一个测试，我使用
浏览 1提问于2019-03-12得票数 0
1回答
请看这张来自萤火虫的图片我想在<a>标签中得到测试。我用这个： sel = Selector(response)
sites = sel.xpath('//div[@class="item//div[@class="block item-title"]/h3/span[@class="title"]/a
浏览 2提问于2014-01-13得票数 0
回答已采纳
查看Twitter: www.twitter.com/twitterl.add_xpath('twitter_following', "(//ul[@class='ProfileNav-list']/li/a/span[@class='ProfileNav-value']&#
浏览 0提问于2018-10-18得票数 1
回答已采纳
我想要获取href值： <a href="https://www.example.com"></a>我试过这个：但我只是在<a>中获取文本。如何获取href中
浏览 4提问于2014-01-17得票数 46
回答已采纳
我有一个原始的html字符串，我想将其转换为scrapy HTML response对象，这样我就可以使用选择器css和xpath，类似于scrapy的response。我该怎么做呢？
浏览 8提问于2014-12-06得票数 28
回答已采纳
1回答
在开始url的第一个响应中，它给出了一个html响应，但当我浏览页面时，它给出了json响应。下面是我的规则： callback='parse_f
浏览 0提问于2016-09-06得票数 0
1回答
我正在尝试从网站上嵌入的JS下拉列表中抓取市场列表：https://e27.co/startups 使用scrapy shell，我试图从“markets”下拉菜单中抓取市场列表，但无法这样做。在运行了scrapy shell 'https://e27.co/startups'之后，我尝试了同时使用response.css()和response.xpath
浏览 9提问于2019-06-13得票数 0
回答已采纳
我坐了一个测试刮刀，它看起来是这样的： name = 'test' nr_pages = response.xpath('//d
浏览 4提问于2020-10-22得票数 0
回答已采纳
2回答
我刚开始研究刮伤，我对这种情况下的最佳实践很感兴趣。Scrapy旨在使用CSS或XPath在页面上选择元素。Disqus的评论似乎加载在iFrame中，使得它们更难抓取。我知道他们有一个API，但是有没有一种方法可以使用xpath/css或其他一些简单的选择器来刮它们呢？我尝试使用Disqus注释计数的xpath，但这似乎行不通。
浏览 2提问于2014-06-07得票数 2
3回答
刮擦选择器不工作飞溅响应
、、、、
但是，下列蜘蛛的选择器会产生空结果：from scrapy.selector import Selector 'model': Selector(text=response.body).xpath
浏览 0提问于2016-06-08得票数 3
回答已采纳
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号