腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
python
中
的
webscraping
没有
返回
我
想要
的
元素
、
我
正在尝试完成web抓取,但是
我
找不到我需要在代码中使用
的
元素
,直到现在当我运行它时,它
返回
"NONE“(
我
想获取标题,时间和标题后面的行): import requests from bs4 import
浏览 10
提问于2020-04-17
得票数 0
1
回答
ConnectionError: HTTPSConnectionPool(host='www.google.com',port=443):
、
、
、
我
想从google.com
中
抓取网页结果。
我
遵循了这个问题
的
第一个答案,。不幸
的
是,
我
得到了连接错误。
我
碰巧也查过其他网站,它
没有
连接。是因为公司
的
代理设置吗?请注意,
我
正在使用虚拟env "
Webscraping
“。文件"c:\users\appdata\local\programs\
python
\
python
37\
webscrapi
浏览 1
提问于2018-10-29
得票数 0
1
回答
csv -
python
抓取
的
多个读数
、
、
我
有下面的代码: from instaloader import Instaloader, Profile profile= Profile.from_username(L.context, PROFILE) print(profile.followers)
我
想通过csv传递多个用户,脚本将为每个用户运行。
浏览 18
提问于2021-01-16
得票数 0
1
回答
PythonWebsc性- Selenium 'CLASS_NAME‘- 'not’以包含所有
元素
、
、
PYTHON
-用于
Webscraping
-是否有一种通过CLASS_NAME使用Selenium查找
元素
的
方法--但是只
返回
类名'xxxx‘下
的
元素
,而不是类名'xxxxyy’下
的
元素
。此代码
返回
所有
元素
(包括)和CLASS_NAME为‘xxxx’.,并包含'xxxxyy‘
的
CLASS_NAME。driver.find_elements(By.CL
浏览 5
提问于2022-08-03
得票数 1
回答已采纳
1
回答
如何检查网页是否已完全加载?
、
、
我
想使以下过程自动化:检查所有的页面是否已经打开。有什么方法可以轻松地执行第二步吗?
浏览 0
提问于2018-12-11
得票数 2
回答已采纳
1
回答
错误2002 (HY000):无法通过Lubuntu20.04LTS上
的
socket '/var/run/mysqld/mysqld.sock‘(2)连接到本地MySQL服务器
、
、
首先,
我
在
我
的
Lubuntu20.04LTS系统上检查了mysql
的
正确安装。下一首,
我
尝试连接到mysql:( andylu@andylu-Lubuntu-PC:~/Desktop/Misc_
python
_scripts/Scrapy_
Webscraping
_Course/books_crawler
python
mysqlclient: sudo apt install default-libmysqlclie
浏览 0
提问于2020-12-06
得票数 0
3
回答
有
没有
一种方法可以使用
python
中
的
selenium在<div>
中
获取值?
、
、
、
、
我
是
python
和
webscraping
的
新手,所以我不确定
元素
中
<div>之间
的
值
的
名称是什么。<div class="syllable">value</div> 有
没有
办法在
python
中使用selenium使用XPath将介于<div>之间
的
值赋给一个字符串变量?例如,
元素
中
<em
浏览 3
提问于2020-12-08
得票数 0
1
回答
如何完全删除
python
中
包含类
的
HTML标记?
、
、
、
我
有一个网络刮刀,从CNN,福克斯,和英国广播公司在BeautifulSoup
的
文章。然后,在进行了一些预处理之后,
我
将原始文章
返回
给API。但是,
我
不知道如何完全删除包含
Python
中
令人讨厌
的
类
的
HTML标记。
我
尝试了lxml清理器,但是
我
可以删除标记,但不仅仅是包含某个类
的
标记。如果在本例
中
我
试图删除“帮助”,
我
想
浏览 1
提问于2022-03-08
得票数 0
回答已采纳
2
回答
Python
-3.x简单XPath库
、
、
我
正在尝试使用
Python
解析非常简单
的
XML。xpath.search(xml (xml string), "XPath Query (//search)" 根据提供
的
XPath查询
返回
找到
的
元素
。现在
我
决定切换到
Pyt
浏览 1
提问于2013-04-03
得票数 3
回答已采纳
1
回答
Python
抓取: soup.select
的
问题
、
我
正在开发一个
python
脚本,用于从特定站点( )
中
刮取数据这次
我
使用soup.select方法,类名为W(100%) M(0),
我
的
代码如下所示:import pandas as pdtable = soup.select(table:has(-soup-contain
浏览 4
提问于2022-09-13
得票数 0
1
回答
webkitbrowser注入javascript修改输入文本值时出错
、
、
、
、
我
在使用
Python
2.7
中
的
WebkitBrower从网页获取输入文本
的
值时遇到了问题。下面是示例代码: user_agent='Mozilla/5.0 (compatible; MSIE 9.0; TOB 6.11; Windo
浏览 2
提问于2015-01-01
得票数 1
回答已采纳
2
回答
为什么这个CSS选择器不
返回
结果?
、
、
、
我
正在跟随一个自动使用
python
的
webscraping
示例,但是
我
的
CSS选择器
没有
返回
任何结果。for i in range(numopen):谷歌是否修改了搜索链接
的
存储方式通过检查搜索页面
元素
,
我
发现
浏览 6
提问于2020-06-01
得票数 0
回答已采纳
1
回答
Selenium webdriver在意外退出后无法重新启动
、
、
、
在几天前
的
最后一次使用之后,
我
还
没有
能够启动
python
的
selenium webdriver
的
实例。根据错误信息,
我
上次使用它时它意外退出,现在,在重启
我
的
macbook后,卸载并重新安装chromedriver/selenium: brew rmtree chromedriver && brew install
我
尝试在
python
3.5内核上运行
的
是:
浏览 5
提问于2016-09-06
得票数 0
2
回答
将刮取
的
数据加载到Postgresql
中
、
我
已经结合了一些关于网络抓取
的
教程,并制作了一个简单
的
网页爬虫,这是刮新张贴
的
问题在这里所以。
我
想将它们加载到我
的
postgresql数据库
中
,但是
我
的
爬虫给我看
的
解码错误有问题。() File "/home/petarp/.virtualenvs/
webscraping
/local/lib/
pyth
浏览 3
提问于2015-06-09
得票数 1
回答已采纳
2
回答
更改URL字符串
中
的
单个值
、
、
我
正在学习网络抓取,
我
正在example.
webscraping
.com上练习。
我
可以从一个页面中提取
我
想要
的
信息,但我想知道如何以最简单
的
方式遍历多个页面。
我
采用了只使用格式化字符串
的
方法,因为页面之间唯一
的
区别是URL "“末尾
的
值。然而,即使创建一个整数并尝试将其作为字符串输入到URL
中
,该url上有一个计数器,以便在每个完整
的
循
浏览 2
提问于2019-11-06
得票数 0
1
回答
如果selenium找不到
元素
,如何使关闭selenium无效
、
、
如果一个
元素
存在,
我
试图
返回
false,但是如果
元素
不存在,
我
不想结束程序。有可能吗?
我
的
Python
代码: if driver.find_element_by_xpath("//a[@class='btn
浏览 0
提问于2020-06-05
得票数 0
回答已采纳
1
回答
Webscrape w/o美汤
、
、
、
、
一般来说,
我
对web scraping和
python
是个新手,但是
我
有点纠结于如何纠正
我
的
函数。
我
的
任务是抓取以特定字母开头
的
单词
的
站点,并
返回
匹配
的
单词列表,最好使用正则表达式。感谢您
的
时间,这是
我
到目前为止
的
代码。import urllib f
浏览 0
提问于2016-12-03
得票数 0
2
回答
将大字符串输出转换为字典
、
、
、
return w.textDomain name: Amazon Europe Holding因此,只要看一下它,
我
就能看到布局是用来把它变成字典
的
,但我不知道如何用尽可能有效
的
方式来实现它。
我
需要删除不
想要
的
文本底部,并删除所有的换行符和缩进。单独做并不是很有效率。
我
希望能够将任何url传递给函数,并有一个可以使用
的<
浏览 2
提问于2017-05-10
得票数 0
回答已采纳
1
回答
Nodejs从承诺异步函数
返回
对象并在网页上显示它?
、
、
、
、
我
是NodeJS
的
新手,
我
想要
构建一个自定义
的
web刮刀应用程序--到目前为止,
我
已经开始使用刮刀器了,但是
我
想在网页上呈现
返回
的
对象。刮板创建一个包含视频数组
的
对象--这个数组是
我
想要
在浏览器
中
显示
的
东西。 到目前为止,
我
已经成功地使用console.log()呈现了结果,但我希望更进一步,并将其显示在网页上。有人知道
浏览 3
提问于2019-11-03
得票数 0
1
回答
从地理位置生成空列表
的
所有结果
、
下面是从指定
的
URL
中
获取所有城市
的
简单代码:url = 'https://www.netmagicsolutions.com/cloud-infrastructure-services尝试了很多解决方案,但都找不到合适
的
解决方案。有
没有
人对此有任何想法?,还是有任何
python
可以从'URL‘?中提取城市/国家?下面是终端快照: runfile('D:/KJ/Na
浏览 0
提问于2018-08-16
得票数 1
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券