腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(142)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
1
回答
Web-scraping
:无法提取所需文本
我正在尝试从这个url 中提取新的描述。html=requests.get(site)soup = BeautifulSoup(html.text,"html.parser")print (summary)描述
浏览 2
修改于2020-01-21
得票数 0
回答已采纳
1
回答
Python :
web-scraping
站点
我已经用需要的表单输入取消了许多其他网站,但我很难弄清楚这一个. 我很感谢你的帮助
浏览 1
提问于2014-04-23
得票数 0
1
回答
多线程-
web-scraping
- Python
我正在尝试抓取这个包含家谱信息的意大利网站:。我的代码运行良好,但有1300000页。我想添加一个多线程来更快地抓取数据。有人能帮帮我吗?下面是我没有使用多线程的代码:import requestsimport pandas as pd first_page = 16999 r = requests.head(url) general = pd.DataFrame(columns = [&
浏览 1
修改于2021-10-12
得票数 0
1
回答
Python
web-scraping
using Beautifulsoup: lowes store
我对刮刮还不熟悉。我被要求从网站https://www.lowes.com/Lowes-Stores获取门店编号、城市和州的列表 下面是我到目前为止所尝试的内容。由于该结构没有属性,我不确定如何继续我的代码。请指点一下! import requestsimport jsonheaders = {'User-Agent': 'Mozil
浏览 12
提问于2020-08-20
得票数 0
回答已采纳
1
回答
Web-scraping
- CSS选择器返回0
我在Udemy上学习了automate the stuff课程,并试图从binance中获取比特币的价格。但是,当使用CSS选择器时,我得到的值总是0。 import requests, bs4 res.raise_for_status() soup = bs4.BeautifulSoup(res.text) elems = soup.select('#top_crypto_table-2-BTC_BUSD > div.css-11d5f40'
浏览 26
提问于2021-08-25
得票数 0
回答已采纳
0
回答
Web-Scraping
-多个带R的页面
我需要从网上刮html表使用R。有一个1000行的每页一个表,总共有316页。第一个url的链接在这里:“”这是我到目前为止在一个页面上工作的代码: library(rvest) url <- read_html("http://sumodb.sumogames.de/Query.aspx?show_form=0&columns=6&rowcount=5&showheya=on&showshusshin=on&a
浏览 7
修改于2021-02-01
得票数 1
回答已采纳
1
回答
VBA
web-scraping
:单击列表中的元素
我想写一个vba程序,它从网页自动下载历史股票数据。我要选择的元素的对应HTML位于以下图片上: Dim IE As SHDocVw.InternetExplorer Dim HTMLCurButton As mshtml.IHTMLElement IE.FullScreen = False IE.Naviga
浏览 2
修改于2019-03-03
得票数 1
回答已采纳
2
回答
Python 3.5.2
web-scraping
- list索引超出范围
我是新的网络抓取,并试图抓取所有内容的餐厅的详细信息形式,以便我可以继续我的进一步抓取。from bs4 import BeautifulSoupr=requests.get(url)print(soup.find_all("Section",class_="js-infscroll-load-m
浏览 5
修改于2021-02-13
得票数 0
1
回答
我的内核被卡在处理简单代码(
web-scraping
)上。
我试着用漂亮的汤做一些非常简单的web抓取,我使用requests.get命令从网站中获取HTML数据。然而,从这个给定的网站,我的内核似乎无法处理请求,我的内核被卡住了。以前有没有人经历过这种情况,并找到了解决办法?requests.get(') r= r
浏览 1
提问于2021-01-02
得票数 1
回答已采纳
1
回答
web-scraping
with bookmarklet -从页面的jquery弹出窗口获取html
网址: freepeople.com/clothes/使用我用PHP和JS创建的bookmarklet,我如何开始捕获这个弹出窗口的HTML?
浏览 0
修改于2021-02-11
得票数 0
1
回答
使用Python登录不使用POST请求的网站-
web-scraping
我正在尝试登录网站(使用get/post请求) ,chrome和mozilla都看不到这些会话。<https://imgur.com/9MB92eX><https://imgur.com/14RyE7i>
浏览 0
提问于2019-08-21
得票数 0
3
回答
‘'str’对象不支持Python,
Web-scraping
中的项分配
我正试图重组我已经存在的/工作的代码。在第二个for循环中进行更改。从以下内容更改代码时,为什么会出现错误:import pandas as pdimport jsonfrom sklearn.preprocessing import OneHotEncoder stats_for_games = [] url
浏览 3
修改于2019-01-10
得票数 0
回答已采纳
1
回答
我无法通过json响应(
web-scraping
)获得想要的参数。
我试图通过以下链接的json响应来提取数据:这是一个节目: from pandas.io.json import json_normalize payload = {'filters': '{"size":24,"from":0,"filterType":"buy","newPrope
浏览 4
提问于2019-05-28
得票数 0
回答已采纳
2
回答
Haskell http-conduit
web-scraping
守护程序崩溃,内存不足错误
我用Haskell编写了一个守护进程,它每5分钟从网页上抓取一次信息。我意识到抓取网站的代码内存效率低得令人难以置信(从睡眠时的30M到解析9M的html时的250M ),所以我重写了它,现在它在解析时只额外使用了大约15M。以为问题已经解决了,我连夜运行了守护进程,当我醒来时,它实际上使用了比那天晚上更少的内存。我以为我已经完成了,但是在它启动大约20个小时后,它崩溃了,
浏览 0
修改于2013-02-26
得票数 8
回答已采纳
1
回答
无法找到
web-scraping
的网站API -没有找到json响应
我正试图从这个网站上刮取委员会的税阶数据,但我找不到API: http://www.gregreda.com/2015/02/15/web-scraping-finding-the-api/https://medium.com/@williamyeny/finding-ratemyprofessors-private-api-with-chrome-developer-tools-bd6747dd228d/**/
浏览 1
提问于2020-07-16
得票数 0
回答已采纳
1
回答
Web-Scraping
:使用Scrapy移动到下一页以获取所有数据
我需要在亚马逊上抓取一个产品的所有评论: 目前我的代码如下:from scrapy.crawler import CrawlerProcess name = 'spid' start_urls = [
浏览 7
提问于2020-08-03
得票数 1
1
回答
Web-scraping
Rvest -如何从缩短的URL中捕获完整的‘href` url
我正在尝试从包含表格和链接的web中抓取数据。我可以成功下载带有链接文本"score“的表格。但是,我想要捕获完整的href url,而不是缩短的URL。 但是,我想我会用rvest缩短URL。我不知道如何才能获得完整的'url‘,我可以像下面这样循环,以获得所需的数据,然后将所有内容转换为数据帧。 library(rvest) odi_score_url <- read_html('http://stats.espncricinfo.com/ci/engine/records/team/match_results
浏览 7
修改于2021-02-08
得票数 0
回答已采纳
2
回答
Python
web-scraping
在抓取表内容时不返回任何内容/null
我是Python的新手,现在我正在尝试从蒙特利尔银行网站()上获取货币买卖汇率,然而,当我尝试获取时,我什么也得不到。用于抓取段落文本和工作: r
浏览 22
修改于2019-08-07
得票数 0
回答已采纳
1
回答
Python
Web-scraping
charmap问题,在IDLE而不是ATOM IDE中工作正常?为什么?
同时执行来自python的简单url读取请求。我在我的Atom IDE中遇到了以下问题,当我在idle中工作时,我没有收到错误,可能的原因是什么。下面是代码。html = urlopen("https://morvanzhou.github.io/static/scraping/basic-structure.html").read().decode('utf-8')以下是错误:
浏览 31
提问于2018-09-26
得票数 0
1
回答
如何使用类{
web-scraping
漂亮using python}在特定的div之间查找文本
这是我需要在div class = '_2qgs‘中刮除文本的部分,当我正在刮擦时,它在输出中显示为空白。刮掉存储在数据变量中的文本,我需要从中找到div class = '‘中的文本 [<div class="hidden_elem"><code id="u_0_8"><!-- <div class="_4-u2 _5z71 _18ib _4-u8"><div class="_4-u3 _5z73"><div class=
浏览 4
提问于2017-06-02
得票数 1
回答已采纳
第 2 页
第 3 页
第 4 页
第 5 页
第 6 页
第 7 页
第 8 页
点击加载更多
领券