https://unicodono.com.br/anuncios/itens/ajax?page=1 这是将数据动态加载到页面的AJAX调用。我认为我正确地发送了表单和标题，但响应返回错误419，crawler停止运行。我不知道如何解释这个错误。我的蜘蛛是不是漏掉了什么？menor_valor'}
for url in self.
浏览 9提问于2019-06-21得票数 3
回答已采纳
2回答
我一直在努力刮网站def parse(self, response): 'User_Agent': user_agent'ncaa-subdivision': '', 'schedu
浏览 0提问于2018-09-02得票数 5
2回答
import scrapyfrom scrapy.http import Request, FormRequest form_data = {'username': 'xxxx','password': 'xxxx' }
return scrapy.<
浏览 4提问于2016-12-01得票数 0
回答已采纳
1回答
我试图制造一个不和谐的刮刀来获取服务器的所有成员，但是我被卡在登录上了，但是我在页面的源代码中任何地方都找不到csrf令牌--也许这就是我得到这个错误的原因，因为有几个消息来源说它是必需的，但我不确定，这是我的蜘蛛造成问题的原因 name = "Recruteur/login'
formdata = {"userna
浏览 0提问于2021-11-08得票数 0
1回答
但是当在Scrapy中完成时，我得到“这个方法要么没有用AjaxMethod标记，要么不可用。”下面是使用的shell命令：request=FormRequest(url='https://www.carwale.comisGSDClick":"","isRecommended":"","
浏览 2提问于2017-04-18得票数 1
回答已采纳
1回答
BaseSpiderfrom scrapy.http import Requestfrom scrapy.http import Response
from scrapy.selector import HtmlXPathSelectorcookies={'FromCurrency': &#
浏览 1提问于2014-03-28得票数 0
我的代码和输出如下：....
>>> url = 'https://www.mcdonalds.com.sg/wp-admin/ad
浏览 3提问于2015-07-07得票数 1
回答已采纳
通过Scrapy Post发送FormRequest请求会导致400个错误，而通过FormRequest请求发出的相同请求是成功的。url = 'https://www.tripadvisor.co.uk/ShowUserReviews-g2151208-d19219570-r792748373FormRequst返回一个
浏览 1提问于2021-06-26得票数 1
回答已采纳
根据文档，请求对象返回响应对象。此响应对象作为回调函数的第一个参数传递。我明白了。这是使用用户凭据处理身份验证和后续请求的方式。
我不理解的是响应对象是如何在身份验证之后对下一个请求调用进行响应的。在下面的代码中，解析方法返回使用FormRequest方法进行身份验证时创建的结果对象。因为FormRequest有一个对after_login方法的回调，所以调用after_login方法时，来自FormRequest的响应作为第一个参数。after_login方法检查以确保没有错误，然后通
浏览 3提问于2014-01-05得票数 1
回答已采纳
1回答
from scrapy.selector import HtmlXPathSelectorfrom delta.itemsimport DeltaItem
start_urls = ["http://www.delt
浏览 1提问于2013-07-01得票数 8
回答已采纳
我假设它就像普通的格式数据，我们使用它在刮刮中生成FormRequest，但是它返回403错误。 ,"passengers" : 1}
yield scrapy.FormRequest(url, callback=self.parse, formdata=formd
浏览 3提问于2019-10-07得票数 0
回答已采纳
1回答
我正在尝试使用ajax发送表单数据。但是ajax操作有一个错误，只执行" error“回调函数。var formRequest = $.ajax({ data: formData});
$("#overlay-proc
浏览 3提问于2017-10-16得票数 4
回答已采纳
1回答
换句话说，从scrapy执行ajax调用。我做了这个：from scrapy.http import FormRequest return [FormRequ
浏览 0提问于2015-08-02得票数 2
我试图抓取以下网站，其中的分页是通过AJAX请求。不能理解哪里出了问题？以下是代码。-2015/',
yield <e
浏览 8提问于2015-01-14得票数 4
代码(针对单个页面)如下所示： from scrapy.spider import BaseSpider from scrapy.contrib.linkextractors.sgml importSgmlLinkExtractor
from scrapy.selector imp
浏览 1提问于2013-06-01得票数 1
登录(沃尔玛)在使用FormRequest.from_response()时返回412错误。 412描述了前提条件中的一些错误，因此我尝试手动传递所有标头。没有起作用。上述网站有表单，但它将它的值传递给它的登录API，所以我尝试使用postman向API的url发出POST请求，它确实起作用了，将想法转移到Scrapy，没有起作用，而且，使它违背了刮板的目的，在登录时使用网站的功能def parse(self, response):
cookie = response.headers.ge
浏览 235提问于2019-10-16得票数 0
1回答
因此，我试图从页面中获得更多的数据，这取决于我使用Scrapy从下拉列表中选择了什么。在下面的代码中，首先我得到下拉列表中的所有元素，它工作得很好。# run this file asfrom scrapy.spiders importitem['Course']=course[2] return items
编辑:这里
浏览 0提问于2018-10-23得票数 0
回答已采纳
1回答
我希望了解更多关于如何使用Scrapy登录网站。我看了一些文档和教程，最终来到了Using FormRequest.from_response() to simulate a user login。这将向https://www.eventbrite.ca/api/v3/users/lookup/发送一个POST请求，其中只包含所提供的电子邮件，如果一切正常，网页将使用JS将您“重定向”到https一旦你填写你的密码并点击表单按钮，如果成功，它将redirect+gener
浏览 21提问于2019-10-02得票数 0
回答已采纳
我使用scrapy.FormRequest向API发送一个POST请求，并返回一个TextResponse对象。该对象的主体如下所示："Refiners": ...new_response = scrapy.http.TextResponse(response.json()["Results"])
浏览 3提问于2022-02-09得票数 0
回答已采纳
云服务器
对象存储
ICP备案
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号