是的，所以我知道如何抓取网站，但我在使用Python3登录我试图抓取的网站时遇到了问题。
我已经包含了该站点使用的HTML。据我所知，这是需要的吗？我尝试了一个简单的解决方案，它看起来应该有效，但却没有(它似乎没有登录，直接转到目标URL，跳过登录？)。
浏览 10提问于2018-09-09得票数 0
回答已采纳
这是我的代码：from bs4 import BeautifulSoup
html = urlopen('http://pythonscraping.com
浏览 3提问于2022-02-11得票数 1
回答已采纳
from urllib.request import urlopen print(child)
有人能告诉我我的代码出了什么问题吗
浏览 5提问于2017-06-07得票数 0
1回答
我一直在使用WWW::Mechanize perl模块尝试登录到一个需要Steam身份验证的网站。到目前为止，我已经成功地将它转到了登录页面，但是一旦我提交了我的表单，它似乎就完全不起作用了。提交表单后，页面内容不会发生变化，就好像我登录失败一样，它会让我重试。我已经搜索了几个小时，我尝试了许多不同的组合来设置表单框和提交文本，但都不起作用。由于某些原因，我几乎没有发现关于检查Mechanize是否可以查看登录是否有效的</e
浏览 3提问于2012-11-18得票数 2
回答已采纳
我刚买了一本书来教我如何刮网站，但第一个例子对我来说不管用--所以现在我有点不高兴，因为我一开始就买了这本书，但我想试着让它继续下去。在Python3.5中，我的代码：from bs4 import BeautifulSoupBsObj = BeautifulSoup(html.r
浏览 5提问于2016-02-12得票数 0
回答已采纳
2回答
我正试着用BeautifulSoup刮一个网站。这个网站需要我登录。请看一下我的密码。page to scrapesoup = bs(r.content)2013-05-10T22:4
浏览 4提问于2013-05-10得票数 1
回答已采纳
1回答
我试图刮一个可能需要认证的网站。当我尝试以下代码时，会得到一个错误：
System.out.println(element.ownText());如果没有登录代码
浏览 0提问于2018-03-09得票数 0
1回答
如何复制需要登录的网站？
、、、
我需要复制一个有登录的电子学习网站。我有登录凭据，我现在正在使用网站学习。但我必须访问该网站的课程很快就会到期，我仍然有更多关于这门课程的知识，甚至在课程结束后我还需要修改一些内容。谁能告诉我有什么软件可以用来复制网站，就像备份一样，这样我就可以离线使用它了？
浏览 46提问于2021-08-13得票数 0
我希望你能在这个问题上提供帮助，我正在尝试使用wkhtmltopdf工具，它在常规网站上运行良好，但我尝试使用edx，它出现了错误，我怀疑问题是它需要使用电子邮件和密码登录，我确实有电子邮件和密码，但wkhtmltopdf工具没有登录命令。我尝试先在浏览器中登录并使用wkhtmltopdf工具我尝试首先使用edx-dl工具登录并使用wkhtmltopdf谢谢
浏览 175提问于2019-07-19得票数 0
当我必须在那里登录才能看到内容时，我如何才能得到整个网站呢？
我试着使用webhttrack，但如果网站需要使用表单登录，就不能使用它。
浏览 0提问于2014-01-16得票数 -1
回答已采纳
2回答
ImageOps.expand(image,border=20,fill="white")html=urlopen("http://www.pythonscraping.comcaptcha_sid'})['value']
captchaToken=soup.find('input',{'name':'captcha_token'})['value']
浏览 0提问于2018-12-28得票数 1
回答已采纳
1回答
我正在尝试使用Requests库中的session对象使用登录凭据发出POST请求，方法是遵循“使用Python进行Web抓取”一书中的一个实践示例。然而，我遇到了一个奇怪的问题(可能是一个bug)。这本书的作者为测试设置了一个简单的登录web页面：。r = ssn.post('h
浏览 0提问于2017-10-28得票数 0
顾名思义，登录过程可能需要cookie或会话。先谢谢你，编辑:在阅读了一些相关答案后，我将添加一些说明：
相关网站没有API。因此，我将需要自己抓取web元素的数据。
浏览 0提问于2012-07-13得票数 1
回答已采纳
3回答
我基本上是在尝试使用Java从我的学校网站上读取一些数据(家庭作业，我上了哪些课，什么时候上，等等)。供个人使用。但是，我的学校需要登录才能访问此信息。谁能告诉我用代码登录和访问这些信息的正确方向？
谢谢，迈克。
浏览 1提问于2011-10-05得票数 0
有没有办法隐藏我的维基站点的内容？我想让有帐户的用户在登录后查看内容。在Mediawiki下这是可能的吗？
浏览 3提问于2013-01-08得票数 0
回答已采纳
我想刮网站，需要用Python和BeautifulSoup登录，并要求库。(没有selenium)这是我的代码： import requestsheadersBeautifulSoup(response.content, 'html.parser')
print(soup) # im not getting the results that I want 我没有得到我想要的</
浏览 4提问于2021-01-18得票数 1
回答已采纳
1回答
我有一张谷歌表格，上面有一个网上商店的产品列表，但没有价格。有没有一个脚本，将抓取网站，并为每个添加到我的谷歌工作表的价格？为了增加复杂性，该网站只能通过登录才能访问。
浏览 8提问于2021-01-19得票数 0
1回答
我在使用CURL登录网站时遇到了一些问题。我想我的问题与cookie文件有关。如何获取SMIDENTITY值？我需要包括__UT*的东西吗？以下是浏览器端发生的事情：
GET https://direct.or
浏览 6提问于2010-11-03得票数 0
云服务器
对象存储
ICP备案
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号