腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
尝试
使用
API
调用
抓取
网站
、
、
、
我正在
尝试
使用
python中的
API
调用
来
抓取
网站
https://www.jobijoba.com/fr/query/?我正在
使用
requests库发送请求。但不幸的是,我无法访问数据。我已经在下面分享了我的代码。我怎样才能高效地
抓取
网站
呢?我应该
使用
selenium webdriver来完成此任务吗?false', 'page':
浏览 13
提问于2020-09-29
得票数 0
3
回答
如果没有提供
API
,我如何创建chrome扩展?
、
、
我怎么能做一个chrome扩展来搜索像www.flipkart.com或www.junglee.com这样的购物
网站
,因为它们不提供
API
? 类似这样的东西-
浏览 3
提问于2012-02-29
得票数 1
回答已采纳
1
回答
调用
网站
并
使用
javascript
抓取
文本(
api
?)
、
我正在
尝试
使用
这个
网站
: (以为例){"id":"36c84ed1708a4fc1b31e031bf1511de6","name":"TEXT_HERE
浏览 1
提问于2015-07-18
得票数 0
1
回答
Scrappy选择器上的Scrappy迭代
、
、
、
、
我正在
尝试
抓取
一个
使用
调用
HTML的
API
的
网站
,因此为此,我需要
抓取
API
,然后从
API
抓取
HTML结果 我已经
使用
这篇文章设法获得了
API
响应,并从中获得了HTML。response.text) selector= scrapy.Selector(text=resp['results'], type="html") 而且它工作得很好,当我
浏览 10
提问于2020-12-16
得票数 1
1
回答
为什么在服务器端与节点一起
使用
jQuery?
、
、
我一直在看到有人在服务器端
使用
jquery+jsdom
使用
jQuery。我正在用服务器端的ExpressJS和客户端的angularJS构建我的应用程序。我正在考虑
使用
jQuery来执行http请求,但最终决定
使用
request模块。我想知道在服务器端
使用
jQuery的原因是什么?是否有任何合理的案例来证明这一点?
浏览 1
提问于2016-04-14
得票数 0
回答已采纳
2
回答
HTTP错误999:请求被拒绝
、
、
、
、
我正在
尝试
使用
BeautifulSoup从LinkedIn中
抓取
一些网页,但一直收到错误“HTTPerror999:请求被拒绝”。有没有办法避免这个错误。如果你看我的代码,我已经
尝试
了Mechanize和URLLIB2,这两个都给了我相同的错误。
浏览 6
提问于2015-05-17
得票数 9
回答已采纳
2
回答
如何在新内容被推送到网页时获得通知
、
、
、
我正在寻找一种扫描
网站
并立即检测更新的方法,而不必刷新页面。因此,当一个新的帖子被推送到网页上时,我希望能立即得到通知。有没有一种方法可以做到这一点,而不必不断刷新页面?干杯
浏览 20
提问于2020-07-08
得票数 1
1
回答
用于apple.com购买/订单历史记录的
API
、
、
、
、
然后将在另一个系统中
使用
这些信息,但似乎找不到任何
API
或方法来在不
抓取
的情况下通过编程获得这些信息。
浏览 20
提问于2021-05-25
得票数 0
1
回答
如何
使用
带检查元素的端点方法XHR提取数据
、
、
、
我正在
尝试
打印这个网页主表的赔率: 它来自检查元素中的网络中的XHR菜单。
浏览 0
提问于2021-03-15
得票数 0
1
回答
从Facebook拉取给定URL的共享缩略图
、
、
、
我想从以下位置拉出共享站点的缩略图: <div class="UIThumbPager_Thumbs">谢谢!:)
浏览 0
提问于2010-09-02
得票数 1
回答已采纳
1
回答
我的脚本获取了几个内容中的几个
、
、
、
、
我写了一个脚本,
使用
他们的
api
从yelp获得所有的评论,评论者的名字和评分。我的以下脚本可以从该
api
生成三个评论、审阅者姓名和评分。然而,在我
使用
chrome dev工具收集他们
api
的登录页面中,我可以看到44条这样的评论。我怎样才能得到所有的它们呢?这是我的
尝试
: res = requests.get("https://eatstreet.com/
api
/v2/rest
浏览 4
提问于2018-08-18
得票数 0
2
回答
调用
Twitch时BeautifulSoup不返回html
、
、
我正在
尝试
为Twitch做一个网络
抓取
器,它将获得流的标题和流信息。我可以从其他
网站
中取出页面的特定部分,但当我放入一个流时,它看起来不像inspect元素中的html。它看起来就像一团乱麻。
浏览 20
提问于2021-01-08
得票数 0
1
回答
Chrome开发者未收到XHR网络请求的选项
、
、
、
、
您好,我在一个
网站
上
使用
python做web
抓取
,我面临的问题是,
网站
没有显示在网络选项卡中获取数据的
api
调用
,共享下面的站点链接,脚本需要转到站点并获取保留/已保留的插槽,并取消选中所有其他的,如果不知何故可以获得该
网站
正在
使用
的
api
调用
,这将是有帮助的 链接:
浏览 1
提问于2021-11-30
得票数 0
1
回答
保护我的
API
、
、
、
、
我创建了一个基于
API
的
网站
,这样我的FrontEnd就可以
使用
简单的REST与后端分离(前端是纯javascript/html)。我想保护
API
不被其他任何人
使用
-这样
调用
可以来自
网站
单独(或者可能允许其他特定
网站
使用
它)。 现在,如果有人
使用
curl,他将能够非常容易地
抓取
API
。假设FrontEnd仅为JS/Html,那么如何保护curl,使来自我自己页面
浏览 8
提问于2014-03-10
得票数 1
回答已采纳
1
回答
为iOS安排后台任务的最佳方式是什么?
我现在有一个应用程序,允许用户从
网站
拉取信息。不幸的是,我没有任何访问该
网站
的
API
,它只是我屏幕
抓取
的东西。理想情况下,用户每天会从
网站
上
抓取
一次信息。目前我设置了一个时间,并
使用
performFetchWithCompletionHandler。当performFetchWithCompletionHandler被
调用
时,它检查设置的时间,如果该时间是当前时间,它将执行
抓取
。有没有办法让我的应用程序在后台运行,并以指定的时间间隔<
浏览 2
提问于2013-11-21
得票数 1
2
回答
Twitter
API
vs Web
抓取
?
、
、
、
、
我做了一点研究,发现我们可以用Ruby on rails做web
抓取
,
使用
: Nokogiri或Mechanize gem。我还得到了一个css选择器,用于web
抓取
。我真的可以
使用
web
抓取
代码来获取我所有的twitter追随者,还是应该
使用
Twitter
API
?
浏览 2
提问于2012-11-08
得票数 0
回答已采纳
2
回答
抓取
coronatracker.com的问题
、
、
然而,当我运行我的代码时,它只
抓取
了表的标题。
浏览 11
提问于2020-06-07
得票数 0
2
回答
创建一个包含许多产品的数据库
、
、
、
、
我正在
使用
为iPhone创建一个库存应用程序,让公司跟踪他们所有的工具,补给,库存。我正在寻找一种简单的方法来制作一个数据库,甚至是一个包含多个品牌产品的表,包括他们的价格,产品规格,订购更多的
网站
,公司
网站
,保修电话号码等。我已经考虑过解析所有零售
网站
的信息,但不知道它背后的法律,如果
网站
发生变化,我将需要更新代码。如果有任何(更容易/更好的)方法来做到这一点,那么帮助或指导将是很好的! 永远感谢你
浏览 2
提问于2013-02-21
得票数 0
回答已采纳
2
回答
Web
抓取
多个页面问题
、
、
我正在
尝试
使用
R代码从以下
网站
中
抓取
前4页用于教育目的: library(rvest)library(tidyverse) url_base <- "https
浏览 28
提问于2020-05-27
得票数 2
回答已采纳
1
回答
如何用PHP构建
API
、
你好,我想在我的社交网络上构建一个基本的
API
和应用程序/应用系统,就像Facebook或者其他
网站
一样,我的站点是php/mysql。以下是一些问题。1) 基本上,我想要做的是给用户一个
API
密钥和秘密。在我有了这些之后,如何在我的php应用程序中
使用
它们来验证来自那里的服务器的用户请求?2)我基本上可以构建一个
API
,以CURL将请求发送到我的服务器,并以XML或JSON等方式将结果返回到页面,问题是当发送请求时,用户必须知道他们想要发送的用户ID来查找数据,这对
API</
浏览 0
提问于2010-01-02
得票数 2
回答已采纳
点击加载更多
相关
资讯
手把手教你使用 Python 调用 ChatGPT-3.5-API
赵长鹏:币安将尝试禁用Skyrex使用的所有API密钥
使用基于 WebRTC 的 JavaScript API 在浏览器环境里调用本机摄像头
CZ:Binance将尝试禁用加密交易机器人平台Skyrex上使用过的所有API密钥
宝塔网站搬家:宝塔一键迁移API版本使用教程——墨涩网
热门
标签
更多标签
云服务器
ICP备案
云直播
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券