1回答
我为python-selenium做了一个自动爬虫，但它总是自动跳到我的桌面上。请告诉我为什么？
浏览 3提问于2021-11-20得票数 0
1回答
对于从桌面单击共享AMP URL的用户，建议的用户体验是什么？一些选项包括：b.将用户重定向到桌面上的规范页面(缓慢+不确定它如何影响SEO)
c.构建桌面页面的AMP版本
浏览 0提问于2018-03-24得票数 0
在服务器上部署了爬虫，想在不使用远程桌面的情况下直接就能查看服务器硬盘上爬虫爬取到的最新数据，想问一下该如何实现？
浏览 345提问于2020-04-16
我正在尝试从安装在USB棒上的WinPython上运行一个抓取网络爬虫，这样爬虫就可以在任何windows计算机上使用，而不需要在桌面上安装python。我阅读了此错误消息，可能的原因是环境变量path，我已将其设置为：我仍然收到相同的错误消息，并感谢在这个问题上的帮助。
浏览 1提问于2014-07-20得票数 2
1回答
我在python中有一个使用Selenium的爬虫。我想在一个集群中启动它，让它运行大约10天。问题是：我已经做了一些搜索和阅读。虽然我可以在python中安装pyvirtualdisplay，但我无法运行我没有个人桌面。有什么建议吗？
浏览 4提问于2013-10-08得票数 0
回答已采纳
由于手机上缺少一些内容，但桌面上却有相同的url结构--它会在搜索引擎中触发一个危险的标志并受到惩罚吗？
谢谢!
浏览 1提问于2014-09-12得票数 0
回答已采纳
1回答
我的branch.io链接在iOS、安卓和桌面上的效果与预期一样，但当我查看爬虫看到的内容时除外。我如何告诉所有使用branch.io链接的爬虫访问我的应用程序的Google Play页面(这样我就可以获得反向链接)？
浏览 2提问于2018-04-12得票数 0
我最近开始与一家拥有Magento eCommerce网站的公司合作。当我开始调查时，我发现ES网站的页面没有出现在尖叫的青蛙上我对我的开发人员说了这一点，他们说他们会将robot.txt文件移动到/pub文件夹。开发人员已经这样做了，应该花多长时间才能看到尖叫的青蛙正在索引页面。谢谢
浏览 0提问于2020-06-30得票数 0
1回答
弹性豆杆不运行的克隆约伯
、、、、
我在一个弹力豆茎应用程序上有一个抓取器，我可以像这样运行SSH：
我想帮我安排一个任务来处理这个问题。Cron won't r
浏览 0提问于2015-04-13得票数 0
2回答
我有一个问题，机器人爬行移动网站，并返回在移动网站上的桌面用户点击。移动内容在/ mobile /常规站点将移动用户重定向到/ mobile / site常规桌面浏览器，允许进入/ mobile / site，并将看到移动版本(用于从桌面轻松测试移动内容)。我希望这两个爬虫索引洞网站，但只有移动爬虫应该索引移动网站。这样可
浏览 0提问于2012-02-13得票数 2
回答已采纳
1回答
我正在使用Swift制作一个简单的网页爬虫作为乐趣和练习。我创建了一个Project.swift文件并将其添加到桌面上的一个文件夹中。现在我想将SwiftyJSON添加到我的项目中。或者我应该坚持使用Python吗？
浏览 7提问于2015-10-13得票数 0
回答已采纳
我将时间序列数据存储在每日生成的DynamoDB表()中。这些表的命名惯例是"timeseries_ 2019-12-20 "，其中2019-12-20为当前日期。我想以CSV格式将前一天表发送到S3桶。推荐的方法是什么？我在看AWS Glue，但不知道如何让它每天找到新的表名。也许有云观察事件的lambda函数会更好？DynamoDB表的大小不大，存储了几百个数字。
浏览 4提问于2019-12-21得票数 0
回答已采纳
2回答
可以在Python 框架中使用.NET框架从不同的站点抓取数据吗？我正在做我的最后一年的项目，在这个项目中，我想使用C#作为前端语言，并使用Python来抓取数据。
浏览 0提问于2014-05-07得票数 4
我有一个python爬虫，每隔几分钟就抓取几个网页。我现在正在尝试实现一个可以通过web访问的用户界面，并显示爬虫获得的数据。我将使用php/html作为接口。无论如何，用户界面需要某种类型的按钮来触发爬虫程序立即抓取特定的网站(而不是等待下一次抓取迭代)。
现在，有没有一种方法可以将数据从php脚本发送到正在运行的python脚本？然后我在考虑使用一个共享文件，php在其中写入数据，python从中读取数据。但是，我需要一些方法来让python脚本知道，新数
浏览 1提问于2011-03-31得票数 1
我用Python2.7编写了大量的Scrapy爬行器。我需要将它们全部转换为支持Python 3，这种转换必须在1 go内完成。我只能在Python 3爬虫做好部署准备之后才能开始使用。现在，由于“所有操作都必须保持活动状态”，我需要一个单独的Python 3爬虫的远程分支。这个分支可以称为Remote-B。我手动创建了这个分支，所以整个存储库现在有两个分支: Master(Remote-A)和Python3爬虫(Remote-B)，后者是主分支的一个
浏览 3提问于2019-09-10得票数 0
回答已采纳
嗨，我想做一个网页爬虫，检查URL的数据，如果我做一个简单的Gui，使脚本更容易查找变量的数据，添加代码的gui会使我的网络爬虫效率降低吗？
我需要爬虫尽可能高效，能够尽可能快地处理数据。为这个Python脚本制作一个gui，会不会妨碍web爬虫的性能？
浏览 3提问于2015-01-27得票数 0
回答已采纳
1回答
我正在制作一个爬虫来找出最近添加的youtube视频，当我的爬虫到达旧视频(在前一个转弯中爬行)时，我想停止爬虫。我使用的不是scrapy和漂亮的汤，我使用的是python库。请给我推荐任何选项
浏览 9提问于2017-06-27得票数 0
我正在努力创建一个Java的网络爬虫。爬虫访问网站，使用JDBC访问/存储数据库中的数据，还将文件存储在本地或云存储上。作为爬行的一部分，我想记录爬虫使用的确切细节--Number of sites visited (HTTP+HTTPS)
Number of bytes of data received当爬虫执行某些操作(如访问网站、下载数据等)时，我是否需要在每个阶段单独记录以上所有参数？？我不希望程序仅仅因为我想测量和跟踪上面的参数而陷入困境。我希望使用爬虫作为桌面
浏览 1提问于2012-06-28得票数 0
回答已采纳
但为了提高SEO的能力，我正在为我的服务器上的机器人爬虫做SSR。我还区分了“桌面”爬虫和“移动”爬虫，并为每个爬虫提供了不同的布局。
我通过用户和机器人的User-Agent字符串来区分它们。
浏览 0提问于2021-01-07得票数 0
回答已采纳
我使用具有无限循环的python制作了一个简单的爬虫，所以它不能停止。随机延迟17 ~ 30，这个爬虫爬行相同的一个页面，并找到'href‘链接，定期更新，并存储到Mysql。因为我使用了Linux命令这个爬虫是在Ubuntu服务器背景下运行的。我想它已经运行了大约4个小时。但爬虫突然停止了。第二天我再试一次。
浏览 1提问于2014-05-20得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
