腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1940)
视频
沙龙
2
回答
Elasticsearch HTTP API或
python
API
、
、
、
、
我是一个实时分布式搜索引擎elasticsearch的新手,但我想问一个
技术
问题。真正的问题如下所示。哪种
技术
更适合我的场合?elasticsearch
python
API还是用于弹性搜索的RESTful API (elasticsearch-py)?
浏览 4
提问于2015-12-01
得票数 1
1
回答
使用多个EC2实例爬行
、
我用
python
编写了一个爬行过程,它运行在亚马逊上的一个ec2实例上。我已经编写了这个
爬虫
,这样它就可以用它的结果向一个单独的"hub“实例报告。集线器处理
爬虫
的结果,
爬虫
可以自由地继续爬行。我在这个爬行实例中想到的是,克隆
爬虫
的几个实例很容易,每个实例都要向中心报告以便处理。 有冗余,所以如果一个
爬虫
被挂断,其余的
爬虫
可以继续工
浏览 2
提问于2015-01-08
得票数 0
回答已采纳
1
回答
Python
-Selenium
爬虫
冻结,特别是在无头模式下(不可复制的bug)
、
、
、
、
我构建了一个
爬虫
,它获取用户输入的产品列表的产品信息。有时,
爬虫
会结冰,特别是如果产品列表很长,如果
爬虫
在无头模式下运行的话。这个bug似乎是随机的,也是不可复制的,这让我认为它是由被爬行的网站的资源
利用
引起的。 该错误发生在“正
浏览 2
提问于2019-05-21
得票数 1
1
回答
如何在
python
中创建基本语义搜索
、
、
、
、
我想用
Python
写一个基本的语义网络
爬虫
,我知道语义应用程序使用RDF文件,但还有什么?我安装了一些
Python
RDF模块,并且开始学习它们是如何工作的。你能向我介绍一下语义应用程序中使用的
技术
和技巧吗?
浏览 0
提问于2011-08-08
得票数 5
回答已采纳
1
回答
抓取器正在获取相关链接。
、
我已经创建了一个使用scrapy.The
爬虫
爬虫
的网站和抓取链接。**所使用的
技术
:**
Python
,Scrapy Error抓取相对urls,因为刮刀器无法抓取网页。我要
爬虫
只取无源网址。
浏览 2
提问于2021-06-29
得票数 1
1
回答
如何检索window.location中给出的重定向url
、
、
、
、
我试着用
Python
制作一个
爬虫
。我正在
利用
美丽的汤和请求库,并需要为一个给定的网站的一套网址。
浏览 4
提问于2015-04-28
得票数 0
回答已采纳
1
回答
抓取
爬虫
:无法将多个urls存储到postgres中
、
、
我使用刮伤
python
.I创建了一个
爬虫
,我想将由
爬虫
获取的多个urls存储到postgres table.When中,启动
爬虫
,抓取urls并将表创建到postgres中,但是数据没有被存储。使用的
技术
: Scrapy错误:我无法存储所有的urls.The
爬虫
并不适用于所有的网站。
浏览 0
提问于2021-12-15
得票数 0
5
回答
对软件漏洞的攻击/工具的软件生命周期有哪些独特的方面?
、
、
、
在我当地的大学里,有一个由大约20名
学生
组成的小型
学生
计算俱乐部。俱乐部有几支小组,他们的重点是移动开发、机器人
技术
、游戏开发和黑客/安全。我不认为他们会太关心维护,因为一旦发现并修补了漏洞,
利用
该漏洞的代码就毫无用处。我想生命周期应该是这样的:
利用
安全漏洞
利用
有效载荷 当产品的目的是破坏安全性时,软件的开发生命周期有什么不同(如果有的话)?
浏览 0
提问于2012-10-15
得票数 10
回答已采纳
1
回答
为什么使用页面跳转组件的时候总是报错?
、
本人是一个非计算机专业的
学生
,想
利用
低代码平台开发一个应用用来比赛,遇到一些
技术
上的困难,求大佬帮帮忙 屏幕截图 2022-01-06 110008
浏览 152
提问于2022-01-06
2
回答
测试我的网站在程序中是如何显示的
、
、
、
、
网站不仅可以被浏览器上的用户访问,还可以被程序、机器人和
爬虫
访问。我有一个运行在上的带有
python
的网站,它具有由
python
程序通过组合、合并和循环字符串生成的非静态HTML页面。
python
生成内容完全是为了方便、简洁和易于维护,并且完全由url设置。 一些搜索引擎无法对动态页面进行索引。我想知道这些页面是否符合“动态”,即它们是否可以被这类机器人为通常的元数据和内容进行爬行或索引,并且通常希望有一种方法来检查任何url在机器人或
爬虫
中是如何出现的,比如搜索引擎使用的url,这样我就可以看到某个如果
浏览 5
提问于2012-01-09
得票数 0
回答已采纳
2
回答
在asp.net网站中运行
爬虫
和更新数据库使用哪种
技术
?
、
、
、
我已经编写了一个
爬虫
(在c#),可以抓取(获取数据)所需的网站数据。 等待..。 谢谢..。
浏览 2
提问于2012-01-14
得票数 0
回答已采纳
3
回答
火场的最佳运行方式
有一个小组项目,我们正在努力,我们想
利用
火花。然而,我们不知道在我们的计算机上运行它的最佳方法是什么。我们曾想过可能是霍顿工作,有人建议我们看看Maven。不过我们还不确定。我们是
学生
,所以我们不能买任何东西(至少任何昂贵的东西)。 当我搜索如何在我的计算机(windows)上运行星火时,它通常会弹出编译
技术
或代码帮助。
浏览 1
提问于2015-04-09
得票数 0
回答已采纳
1
回答
如何
利用
Spark2.0“全阶段代码生成”
、
、
、
由于该
技术
在编译阶段对代码进行了优化,因此我对此有几个问题:val query = scala.io.Source.fromFile(queryfile).mkStringsparksession.sql(q
浏览 0
提问于2017-02-15
得票数 1
回答已采纳
2
回答
如何使用
Python
将德语单词转换为英语?
、
我正在尝试抓取一个德语网站,我需要将抓取的数据从德语转换为英语。现在,我所做的是我点击了第三方网站来为我做这个过程。在此,我附上了我尝试过的代码,如下所示:import urllib2import reimport stringimport socket base_url = 'http://translate.reference.com/
浏览 0
提问于2015-05-02
得票数 3
3
回答
我如何用
Python
和mongoDB模拟大学和
学生
/讲师之间的关系?
、
我需要创建一个学院的模型,学院有一个名字,一个成立日期,它有一份
学生
/讲师名单等等。我应该只开设一个叫大学的班级,并把
学生
作为班级的一份名单,还是应该为
学生
和讲师创建新的班级,并在大学课堂上以某种方式加以
利用
。我对编程很陌生,所以我很抱歉,如果这是一个菜鸟问题,但是我不知道
Python
有什么可能,也不知道如何更好地表达这一点。 谢谢。
浏览 6
提问于2019-08-15
得票数 0
回答已采纳
1
回答
我找不到在哪里认证
学生
身份?
浏览 251
提问于2017-11-14
1
回答
Visual Studio 2017从社区升级到企业
、
我是一名CS
学生
,通过我的学校,我获得了升级到企业的执照。到目前为止,我主要使用
Python
,但是在秋季学期我将使用C/C++。卸载社区版本并安装企业版本是否最有意义?作为一名
学生
,我是否能够
利用
这些功能? 如果是这样的话,我应该先卸载社区版本,这样就没有问题了吗?或者可以下载企业版,一旦我得到企业版的所有
Python
包,卸载社区版就可以了?
浏览 0
提问于2017-07-29
得票数 27
回答已采纳
2
回答
如何创建一个成本效益高但可伸缩的网站?
、
门户
技术
评估,我们将在其中为校园和行业创建一个安置门户,以帮助安置
学生
。该门户将以并发模式处理大量数据和登录人员,每天约有1000个用户。 我应该使用什么
技术
?使用CakePHP作为框架,Ruby on Rails,ASP.NET,
Python
,或者我应该选择云计算吗?其中哪一个是最具成本效益的?
浏览 5
提问于2010-06-20
得票数 3
回答已采纳
1
回答
Scrapy Crawler:避免重复抓取URL
、
我创建了一个
爬虫
使用Scrapy.The
爬虫
正在抓取网址的网站。使用的
技术
:
Python
Scrapy问题:我有重复的URL。我需要的输出是:我希望
爬虫
抓取网站的网址,但不爬行重复网址的。
浏览 32
提问于2021-06-29
得票数 0
2
回答
对于涉及使用自然语言处理的数据密集型算法的应用程序来说,Java或
Python
是更好的选择吗?
、
、
、
、
我从未使用过
Python
,但是,我没有学习它的任何限制。
利用
机器学习、人工智能和自然语言处理算法对采集的数据进行后端处理。在探索可用的选项时,我发现
Python
和Java都有广泛的支持,框架/库/模块可以用来
利用
机器学习实现。然而,与Java一起工作给我一种强类型编程的感觉,它可以通过其健壮的多线程API来
利用
底层的CPU内核。另一方面,<e
浏览 0
提问于2017-10-03
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Pathon技术:利用Python实现自动投票以及自动爬虫IP代理
利用 Python 编写简单网络爬虫实例 2
利用 Python 编写简单网络爬虫实例 1
Python爬虫——利用PhantomJS下载动态加载图片
利用 Python 编写简单网络爬虫实例 3
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券