使用XMLHTTP进行Web抓取

文章/答案/技术大牛

发布

1回答

css、vba、dom、web-scraping、xmlhttprequest

我想从一个求职网站上抓取所有的职位和公司名称。但是，我无法这样做，因为我认为我无法检查HTML代码中的正确元素。我研究了几天，请协助和建议正确的HTML元素。一旦我能够检查正确的元素，我将进行循环并完成此程序。很感谢你。网址：https://www.efinancialcareers.my/search/?countryCode=MY&radius=40&radiusUnit=km&page=1&pageSize=20¤cyCode=MYR&language=en0 Optio

浏览 19提问于2020-07-20得票数 0

1回答

使用登录MSXML2.XMLHTTP60进行Web抓取

excel、vba、web-scraping

我正在尝试使用我在本教程中看到的方法来访问以下网页中的一些数据。https://my.powerdiary.com/Profile/Client/Search 然而，需要登录，并且不确定如何通过它。选项显式 Sub HTMLTest() Dim HTMLDoc As New MSHTML.HTMLDocument

浏览 86提问于2021-10-17得票数 0

回答已采纳

1回答

使用VBA和MSXML2.XMLHTTP库进行Web抓取

vba、web-scraping、xmlhttprequest、msxml

我试图在VBA环境(Excel)上使用MSXML2.XMLHTTP对象从网站中删除数据，但我不知道如何解决这个问题！该网站如下： strRenavam = "01021783231" Dim

浏览 0提问于2018-05-13得票数 0

回答已采纳

2回答

使用xmlhttp抓取

excel、vba、xmlhttprequest、scrape

我尝试过：Dim HTMLDoc As New HTMLDocumentXMLHttpRequest.Open "GET", "https://www.goaloong.net

浏览 2提问于2021-02-04得票数 0

1回答

我是否可以为我的TP-Link无线路由器执行基于表单的http身份验证(IP: 192.168.0.1)

javascript、html、xmlhttprequest、basic-authentication

var address = "http://192.168.0.1/"; var password = "admin"; if (window.XMLHttpRequest) xmlhttp=new XMLHttpRequest(); { <e

浏览 2提问于2014-11-25得票数 0

回答已采纳

1回答

如何加载外部XML以将数据导入Phonegap应用程序

javascript、xml、cordova

我正在构建一个使用Phonegap的应用程序，该应用程序从外部URL抓取数据，然后使用javascript显示信息。下面是我的索引文件中获取xml的代码：else {/* code for IE6, IE5 */ xmlhttp=new Act

浏览 0提问于2014-05-23得票数 1

1回答

IE Readystate在VBA网络抓取过程中停留在1

vba、web-scraping、readystate

Sub Navigate() IE.Navigate ("http://web.vermont.org/Accounting?

浏览 1提问于2015-02-01得票数 0

回答已采纳

1回答

Excel Web抓取MSXML2.XMLHTTP库

html、excel、vba

我使用下面的代码来提取网页的概要文件(见下图)。 Set oHttp = CreateObject("MSXML2.XMLHTTP

浏览 1提问于2021-11-06得票数 0

回答已采纳

2回答

使用javascript检查另一个网站的html代码

javascript、html

另一个网站使用图像标签<img src="http://website/123.png" id="ImageToDisplay">我将使用Classic ASP运行JavaScript

浏览 0提问于2015-02-06得票数 0

2回答

XMLHTTP正在从父网页中提取HTML

html、vba、web-scraping、xmlhttprequest、wunderground

我正在尝试从wunderground中提取历史天气数据--最初我试图使用标准的HTML元素等从主网页上抓取web数据。然而，后来我发现，如果你将"?format=1“添加到URL中，浏览器将或多或少地显示csv，这更容易解析为数据表…… 然而，我仍然使用IE浏览器，这可以相当慢，如果你有很多数据拉，所以我开始寻找使用XMLHTTP对象，以帮助拉数据更快format=1“到网址的末尾将返回一个很好的瘦csv，但当我使用XMLHTTP它拉原始页面

浏览 0提问于2017-02-05得票数 0

1回答

下载带有VBA的网页的HTML内容会激发Google分析事件吗？

vba、excel、google-analytics、web-scraping

我想知道，如果我使用VBA抓取脚本从网页上抓取数据，Google Analytics事件是否会被触发？我不是使用浏览器模拟，而是使用带有MSXML2.XMLhttp请求的GET对象。例如With XMLreq .Open "GET

浏览 1提问于2016-05-01得票数 0

回答已采纳

1回答

使用VBA刮取实时数据

javascript、html、json、vba、web-scraping

我想使用VBA从中抓取实时数据。 Set xmlhttp = CreateObject("MSXML2.XMLHTTP")xmlhttp.Open "GET", "https://iboard.ssi.com.

浏览 1提问于2021-09-13得票数 2

回答已采纳

2回答

如何使用NodeJS从GeoJSON文件创建PBF文件？

javascript、node.js、osm.pbf

我有一个名为countries.geojson的Geojson文件。var express = require("express");var Pbf = require('pbf');const path = require('path'); var app = express()

浏览 61提问于2020-02-18得票数 0

1回答

如何在Excel中接收电子邮件

excel、email

如何使用从帐户读取GMail电子邮件？有什么想法吗？最简单可靠的方法是什么？谢谢!谷歌搜索显示了很多页面，上面有使用Excel发送电子邮件的指令。这太简单了:)。

浏览 0提问于2013-08-30得票数 0

1回答

使用Python进行Web抓取

python、urllib2、web-scraping

我正在尝试使用urllib2和BeautifulSoup来抓取网站的urllib2。不幸的是，当我试图通过Python访问页面时，我一直被禁止使用403。我认为这是一个用户代理问题，但改变它没有帮助。

浏览 4提问于2011-08-06得票数 2

1回答

使用bash进行Web抓取

arrays、bash、url、web-scraping、scripting

我在用bash做网络抓取。我有一个保存在URL.txt文件中的URL?daypartId=1&catId=11 ?

浏览 0提问于2020-06-06得票数 0

回答已采纳

10回答

使用Python进行Web抓取

python、web-scraping、screen-scraping

有没有可能用Python抓取web内容？使用了哪些模块？有没有可用的教程？

浏览 2提问于2010-01-18得票数 186

回答已采纳

1回答

使用selenium进行Web抓取

python、selenium、beautifulsoup

我的意图是从网页()中获取名称、位置、发布时间、评论标题和整个评论内容。 from bs4 import BeautifulSoup from selenium.webdriver.common.desired_capabilities import DesiredCapabilities firefox_capabilities['marionette'] =

浏览 8提问于2017-11-18得票数 1

回答已采纳

2回答