腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
我怎么能强制停止我的
爬虫
得到一个特定的网址抓取最后一次?
、
、
、
、
我正在制作一个
爬虫
来找出最近添加的youtube
视频
,当我的
爬虫
到达旧
视频
(在前一个转弯中爬行)时,我想停止
爬虫
。我使用的不是scrapy和漂亮的汤,我使用的是python库。请给我推荐任何选项
浏览 9
提问于2017-06-27
得票数 0
1
回答
node.
js
网络
爬虫
图像/
视频
、
、
、
最近我一直在使用网络
爬虫
,我已经想出了如何搜索文本,但有没有办法让我的网络
爬虫
搜索其他东西,比如
视频
和图像,然后下载它们并组织它们。这是目前为止我的网络
爬虫
:var cheerio = require('cheerio');});我已经从一个在线教程中获得了大部分代码,以帮助
浏览 3
提问于2016-09-04
得票数 0
1
回答
python scrapy在尝试使用参数时找不到爬行器
、
为什么蜘蛛的名字永远不会被
抓
抓
爬虫
读到,就像
抓
抓
蜘蛛一样?非常感谢您的帮助
浏览 0
提问于2012-10-09
得票数 0
1
回答
问题在使网址为网站使用php和ajax
、
、
我的
视频
在这个页面上工作得很好。我正在使用Ajax调用加载
视频
。
视频
工作正常,但我有一个问题,搜索引擎不会索引我的页面,因为这些页面是通过ajax加载的。如果有人能帮助我,我可以让我的
视频
的url类似于www.illamicaim.com/category/artists/title。
浏览 4
提问于2011-05-22
得票数 2
回答已采纳
2
回答
如果我使用iframe,一个自我托管的
视频
会在Google
视频
搜索中被索引吗?
、
、
、
、
我们为
视频
创建了一个托管域,并使用iframes将它们嵌入到我们的网站上。这会妨碍谷歌
爬虫
在谷歌
视频
搜索中为我们的
视频
建立索引吗?
浏览 0
提问于2020-06-28
得票数 3
回答已采纳
2
回答
嵌入式youtube
视频
抓取链接
、
、
、
、
我试图收集的数据是youtube
视频
嵌入到他们的页面中的链接。问题是当我使用urllib2时,我无法执行
js
,所以链接不会出现在我的代码中: response = OPENER.open("https://www.hopenglish.com/how-sugar-affects-the-brain(几乎我所有的
爬虫
都已经实现了,我只需要嵌入
视频
的youtube链接)
浏览 2
提问于2016-12-13
得票数 1
回答已采纳
1
回答
认证所需的内容如何被索引/爬行?
、
、
、
假设我们有一个可以观看在线
视频
的VOD平台,并且需要认证来显示该
视频
或任何类型的内容。用户必须注册,然后,他们可以访问
视频
等。这些
视频
对网站SEO真的很重要,我想知道搜索引擎
爬虫
如何访问通常需要认证过程才能访问的内容?
浏览 0
提问于2021-05-11
得票数 1
1
回答
爬行url \如何在node.
js
中获取动态链接
、
我正在使用
js
爬虫
来抓取网站,现在我遇到了CNN,的那一部分(基于某种原因动态生成的urls)。事情是
爬虫
,不要真正接触脚本-我应该如何解决它?除了我的node.
js
爬虫
之外,我还应该编写自己的代码吗?是否有先进的
爬虫
知道如何处理这种动态行为?
浏览 1
提问于2016-07-23
得票数 2
回答已采纳
1
回答
JS
:
抓
不到json键
、
我正在提交一个JSON,并试图访问各个密钥。 const jsonData = target.getAttribute('datas'); console.log(jsonData[0].id); // returns undefined for(let key of Object.keys(jsonD
浏览 8
提问于2022-05-25
得票数 0
1
回答
就像
视频
中所显示的那样,破解wifi密码也一样容易吗?
、
、
我当时正在浏览YouTube,在
视频
中我偶然发现了这段
视频
,他们展示了如何使用CommView、Aircrack和Wordlist破解wifi的密码。根据这段
视频
,破解密码需要大约两分钟,但我想可能需要更长的时间,这取决于密码的难度。但是这种方法的缺点是什么呢?我的意思是,如果破解wifi密码如此容易,为什么需要付费的wifi存在,例如在机场?是100 %被
抓
的感觉吗?还是
视频
中的那个人破解了一个“简单”的无线网络? 对于主要的问题,怎样才能保护自己免受这样的攻击呢?
浏览 0
提问于2016-09-04
得票数 2
回答已采纳
3
回答
"invalid request check content-type and body?
、
您好,调用“唇语活体检测
视频
身份信息核验”,总是报错这个。
抓
包看了看content-type和body没什么问题。不清楚问题处在了哪里?请指教。
浏览 711
提问于2018-03-15
2
回答
保存网页以供脱机浏览
、
、
、
我正在尝试创建一个android应用程序来保存网页,以便在offline-browsing,中使用它--我能够保存网页,但问题在于内容(图像、javascripts、..etc),有什么方法可以这样做-- programmatically,使用eclipse并在模拟器上测试我的工作。
浏览 0
提问于2010-12-30
得票数 1
回答已采纳
1
回答
向机器人隐藏代码
、
、
、
、
有没有一种方法只对
爬虫
隐藏页面的特定部分?那么,有没有办法对机器人隐藏某些部件,但在未来不会对用户隐瞒?不是整页,只是部分。但没有理由不让智能
js
阅读
爬虫
来隐藏它。麦芽酒
浏览 6
提问于2014-10-16
得票数 0
回答已采纳
1
回答
我是否可以使用网络
爬虫
将新的youtube
视频
添加到播放列表?
、
、
这是我想要做的:我订阅了一些You Tube频道,我将以IGN为例,一天上传多个
视频
。我想编程一个网络
爬虫
去到IGN的你管页面在晚上11:00每晚,并添加过去24小时内上传的每个
视频
到一个新的播放列表,然后命名该播放列表与日期。例如:"IGN新闻3.18.16“ 这是可以用Javascript的网络
爬虫
来完成的事情吗?如果是这样的话,我该怎么做呢?
浏览 5
提问于2016-03-19
得票数 0
1
回答
500G 在哪儿能找到资料?
、
、
、
、
500G python web、
爬虫
、数据分析、机器学习、大数据、前端实战项目
视频
代码免费分享 在哪儿能下载到资料,在线等,挺急的~, 感谢各位大佬~
浏览 256
提问于2019-05-10
6
回答
如何让搜索
爬虫
正确地索引无限滚动的页面?
、
然而,这意味着搜索
爬虫
无法获得第一个“分页符”之后的所有内容。例如,我有一个页面,其中列出了所有带有"infographic“标签的项目。实际上有几十个这样的项目,但
爬虫
只能看到前10个项目,因为其他项目是根据内容相对于浏览器窗口的位置加载的。由于
爬虫
没有浏览器窗口,所以根本不会加载新项目。那么,什么才是正确的方式,让搜索
爬虫
通过无限滚动访问网页的全部内容,同时又允许用户享受无限滚动和没有分页的情况?
浏览 0
提问于2012-05-28
得票数 13
回答已采纳
1
回答
服务端渲染如何帮助
爬虫
?服务器端渲染和客户端渲染哪个更好?
、
、
、
我正在阅读angular的服务器端渲染文档,因为它们提到服务器端渲染是帮助
爬虫
。我知道在服务器端渲染
爬虫
可以获得整个dom,但
爬虫
也可以与组件交互,那么它如何帮助
爬虫
呢?
浏览 18
提问于2019-09-15
得票数 0
1
回答
在Android应用程序中从动态
视频
播放器网页中抓取
视频
链接
、
、
、
我正在开发一个应用程序的目的是从一个在线
视频
播放器下载MP4
视频
。用户打开
视频
播放器,我的应用程序应该下载用户指定的
视频
。
视频
播放器显示动态内容,我的意思是,它可以显示的
视频
没有固定数量。有时它会显示四个
视频
,有时甚至会显示五十个。
视频
播放器上有“下一步”和“上一步”按钮。这些按钮跳过或返回到
视频
播放器当前加载的
视频
。目前,我正在抓取
视频
播放器的网页,当前播放的MP4
视频
的链接可
浏览 47
提问于2019-02-11
得票数 0
1
回答
drupal添加带有
视频
字段的产品
我很难用各种方法将
视频
插入到Drupal产品中。我正在尝试迁移模块以及网络
爬虫
。 在内容类型中,有一个"Youtube
视频
“类型的field_video。我这里需要多个
视频
。如果我点击“添加
视频
”并输入一个新的URL,我可以用web创建这个功能。但是,我更不喜欢在页面上爬行很多次,或者做一些疯狂的迁移。
浏览 0
提问于2013-10-16
得票数 1
回答已采纳
1
回答
如何获取VideoCapture::read获取到的帧的PTS或帧号?
、
、
在我们的实现中,我们需要知道OpenCV解码后的帧的pts或帧号,然后根据解码后的帧做一些处理,然后建立原始流中的pts或帧号与处理结果之间的映射。
浏览 35
提问于2018-08-20
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Python爬虫初接触,学会爬虫不抓美女图片干啥!
爬虫——手机抓包,fiddler抓取手机qq请求
运用 Redis 构建分布式爬虫,抓妹子图
python爬虫视频
Python 爬虫,推荐一款简单的抓包工具
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
腾讯会议
活动推荐
运营活动
广告
关闭
领券