1回答
从动态表中抓取数据
、、、
我试图从table="table-main“网站：中提取所有TD值。我正在使用Scrapy和Python2.7response.xpath('//*[@id="tournamentTable"]')
但我似乎无法得到那张桌子的任何response.xpath('//*[@id="tourname
浏览 5提问于2015-11-01得票数 3
回答已采纳
我正试图在每一份盈利报告中分析表(资产负债表)中的一些数据。这里我以AMD为例，但不限于AMD。我现在的问题是，我无法读到任何东西--我的蜘蛛总是返回空的结果。我使用scrapy shell "http://example.com"测试我的xpath，我直接从Google检查器复制它，但它仍然没有工作。：
class ESItem(scrapy</e
浏览 0提问于2016-09-27得票数 1
回答已采纳
1回答
style="padding-left: 27px;">25 years old</div> </tr>我使用
response.xpath('//table[@class="table squad sortable"]//tr//td//a/@href').ext
浏览 20提问于2018-01-26得票数 0
1回答
我正在尝试从link中提取数据，我使用 scrapy shell "https://www.newegg.com/Product/Product.aspx?Item=06T-0045-00045" 我得到了正确的响应，但不能让Xpath工作，即用response.xpath('//li[@class="price-current"]')返回空的价格，我也尝试了respo
浏览 6提问于2019-05-13得票数 0
回答已采纳
1回答
刮擦返回空json文件
、、、
我使用刮除来从网站中提取数据。当我打开json结果文件时，总是返回空的。我的代码附在一起：
name = "stack" questions = Selector(response).xpath<
浏览 0提问于2015-11-05得票数 0
回答已采纳
1回答
刮除Xpath输出为空
、、、
我想在这个网站上提取数据：，我正在学习python，以及如何使用Scrapy，我的问题是:为什么我不能用Xpath检索数据？当我在浏览器中测试Xpath时，我的xpath看起来很好，它会返回正确的值。(谷歌Chrome)from scrapy import Spider
浏览 2提问于2016-06-28得票数 3
回答已采纳
1回答
我正在尝试从以下页面解析亚马逊标准识别码(ASIN)。
from scrapy.crawler import CrawlerProcess
name= 'amazon.com'
d
浏览 2提问于2018-09-26得票数 1
我正在尝试从商店中刮取数据：scrapy fetch --nolog "https://www.tibia.com/charactertrade/?sword = response.xpath('//div [@cla
浏览 1提问于2020-08-28得票数 0
回答已采纳
1回答
我一直在使用scrapy来抓取一些数据，而我最近开始刮擦的页面中有两个表与普通的页面相比。我想分开刮表，do有ID。我尝试过使用各种路径(如下所示)，最后我要么将两个表拼凑在一起，要么使用一本空白的条目字典，要么刮掉找不到路径。_1"] /html/body/div[2]/div/
浏览 1提问于2016-10-21得票数 0
回答已采纳
2回答
我需要来自不同表格的数据。在这种情况下，表0:17和表18。我不需要表17。如何在一个Scrapy爬行器中解决它。此解决方案不起作用。Scrapy目前只从表0:17中获取数据，而不从表18中获取数据。trs = tab.xpath('*//tr')[1:]
for tr i
浏览 2提问于2020-01-22得票数 0
我正在使用Scrapy + Splash抓取网页，并试图从google广告横幅和其他广告中提取数据，但我很难让scrapy跟随xpath进入它们。我使用google来渲染页面，以便加载他们的脚本和图像并截图，但似乎广告横幅是由JS脚本创建的，然后将其内容插入到网页中iframe中的新html文档中，如下所示：
Splash确保呈现代码，这样我就不会遇到scrapy经常遇到的脚本问题--它读取脚本的内容，而不是生成的html --
浏览 11提问于2017-06-20得票数 1
回答已采纳
我正在做一个项目，它涉及到使用Scrapy从网站上抓取数据。之前我们使用Selenium，但现在我们必须使用Scrapy。我没有任何关于Scrapy的知识，但现在正在学习它。其中一个挑战是从网站上删除数据，这些数据是在表格中结构化的，虽然有下载这些数据的链接，但在我的情况下是行不通的。下面是表的结构到目前为止，我已
浏览 2提问于2018-10-30得票数 0
2回答
我正在尝试爬行这个，但是我得到了空响应，我使用了scrapy，我尝试了打印xpath，但是我得到了空数组，虽然这是一个直接的任务，但是现在我无法从表中获取数据。这是我的密码。import scrapy
name = 'share'yield Request(url, call
浏览 16提问于2022-11-14得票数 1
回答已采纳
我对网络抓取很陌生，在过去的几天里我一直在学习Scrapy和Selenium。我正试图从这个来源中提取一些信息：，具体而言，我需要一个公司名称，首席执行官的名字，和电子邮件。例如，给定这个表：，我想在第一个标记中提取文本。当我在scrapy：response.xpath('//table[@class="sub-table"]/tbody/tr[1]/td[1]/text()').get()上编写这段代码时，它会返回第一个内
浏览 17提问于2022-02-17得票数 0
2回答
我正在尝试从gsmarena页面下载数据："“。import scrapy
phoneName = scrapy.Field() passfrom scrapy.selector im
浏览 4提问于2015-06-06得票数 2
2回答
我试图刮掉这个，我尝试在cli中运行scrapy，我可以获得//table[@class='table my-table']响应到这个xpath，但是之后我无法获得任何数据，因为响应是空数组[]，我不觉得内容隐藏在JavaScript中，我错过了一些技术，或者我的方法有问题吗？这是我的整体代码供参考 name = "nepse_floorsheet&qu
浏览 9提问于2022-11-09得票数 0
回答已采纳
我在从刮取的数据构建csv类型的数据文件时遇到了问题。我已经成功地从表中抓取了数据，但当涉及到编写数据时，我几天都不能这样做。我正在使用项目，并试图将其写入熊猫数据框架。我正在使用物品列表。Name','Position','Office','Age',
yield x.
浏览 1提问于2017-07-06得票数 3
回答已采纳
1回答
我正在为wunderground.com在Scrapy中制作一个web刮刀，但是我选择的许多不同的XPaths返回空数组。以下是代码：import scrapyimport time
class WundergroundComSpider(scra
浏览 0提问于2015-07-09得票数 0
回答已采纳
1回答
我试图从这个中抓取标题和urls，并将它们存储在.json中。在scrapy shell中的初步xpath测试在终端中显示标签中的urls和标题，但是完整脚本返回空字符串的[]},
{"url": [], "title": []}
浏览 0提问于2014-03-07得票数 4
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
