虽然我可以手动完成这项工作，但我想用Java完成这项工作，以便更好地学习编码。结果是：
Exception in thread "main" com.gargoylesoftware.htmlunit.ElementNotFoundExceptionelementName=[input] attributeName=[name] attributeVa
浏览 9提问于2016-08-31得票数 1
回答已采纳
我发现使用htmlunit在动态创建新的html内容方面非常困难，就像我们在jquery中所做的那样。如果单词超过3个字符，则将其替换为span)：在此之后，我想将原始的text节点(I am text)替换为在html文档中，无论它出现在哪里。那么我如何使用htmlunit</em
浏览 2提问于2011-06-30得票数 1
回答已采纳
3回答
我使用htmlunit从网页中抓取图像。我是htmlunit的初学者。我编码了，但不知道如何获取图像。下面是我的代码。import java.io.*;import com.gargoylesoftware.htmlunit.BrowserVersion;import com.
浏览 1提问于2012-04-11得票数 1
回答已采纳
1回答
我正在使用HtmlUnit来抓取数据，并且我已经习惯了XPath的语法。然而，我遇到了一个问题。
我需要拉一个元素，这个元素在页面之间是不同的，有时是"span“元素，有时是"a”元素(链接)。原因很简单，有时我正在抓取的项目有一个链接，有时它只是纯文本(声明显而易见)。但是，与此相同的是一个名为"data-reactid“的属性，它的设置值总是为99。我一直在读书，到处乱跑，一直在尝试
浏览 5提问于2015-05-01得票数 0
回答已采纳
这是我要刮的一页： catch(Exception e){
e.
浏览 0提问于2019-05-17得票数 1
目前使用的是jsoup，我只能抓取前7个线程，因为其他线程会在几秒钟后加载。我试图让htmlunit加载整个页面，然后使用jsoup来抓取所有的线程标题。(Context.java:624) at net.sourceforge.htmlunit.corejs.javascript.ContextFactory.call(ContextFactory.java(WebClient.java:419) at com.gargoyleso
浏览 0提问于2020-02-10得票数 1
我正在使用HtmlUnit尝试抓取网页，因为它支持Javascript。(我更喜欢使用Jsoup，但不支持JS )。这显然可以在Neko中启用，但我使用的是HtmlUnit。有没有一种方法可以配置底层的Neko解析器，HTML单元正在使用它来启用这个特性？在尝试运行此代码时：
final WebClient webClient = new
浏览 3提问于2012-06-21得票数 0
回答已采纳
1回答
我正在学习如何在Java8中使用htmlUnit抓取，并且我正在尝试将一个应用程序部署到谷歌应用程序引擎上，该应用程序将经常抓取某些网站。我正在Eclipse中开发应用程序，它在本地运行时可以正常工作，但是在部署到GAE后，我的应用程序不再能够连接到任何网站。<stderr>: at com.gargoylesoftware.htmlunit.WebClient.loadWebResponseFrom
浏览 0提问于2018-03-15得票数 0
5回答
我需要从网站上抓取一些数据，因为这些数据不能通过他们的web服务获得。当我之前需要这样做时，我已经使用Apache的HTTP客户端库自己编写了Java代码，以便进行相关的HTTP调用来下载数据。通过在浏览器中单击相关屏幕，同时使用记录相应的HTTP调用，我找出了需要进行的相关调用。正如您可以想象的那样，这是一个相当单调乏味的过程，我想知道是否有工具可以实际生成与浏览器会话相对应的Java代码。我希望生成的代码不会像手动编写的代码那么漂亮，但我总是可以在
浏览 0提问于2009-01-08得票数 6
我正在编写一个Java程序，它从网页中抓取链接，然后将它们存储在数据库中。不过，我还是有点问题。使用HTMLUnit，我写了以下代码：它返回正确的锚元素，但我只需要href属性中包含的实际路径，而不是整个内容。如何做到这一点，以及如何<
浏览 2提问于2010-07-22得票数 0
回答已采纳
2回答
用Java从网页上抓取数据？
、、、、
我正在为我的一个班级创建一个twitter机器人，以练习使用队列并构建我的简历。这是一个示例网页。我的理由是，最初是获取网页的链接，然后获取页面源代码，浏览@twitterhandle，然后将这些添加到队列中，以便稍后在构造消息时使用。
我查了一下网页来源，但我在网页上找不到twitter的名字。在Java中还可以这样做吗？
浏览 0提问于2013-03-02得票数 1
回答已采纳
1回答
我们有一个多线程应用程序，用来抓取来自不同网站的数据。我们使用htmlunit下载一些网站的内容。内存不足的错误问题突然开始出现。我们的应用程序在部署服务器中使用30个线程。我们在部署中使用了以下方法：htmlunit-core-js-2.12.jar
Java: Java(TM) SE Runtime Environment (buildMaxPermSize
浏览 0提问于2015-09-09得票数 1
我正在尝试加载一个页面，然后单击一个使用Java2.4的HTMLUnit链接。我正在尝试通过xPath在页面上查找日历。它返回null。我使用Chrome DevTools网络选项卡查看加载到页面的第一个资源是否包含我想要的数据。我不认为这与AJAX相关。;
public class App
浏览 2提问于2018-07-19得票数 0
回答已采纳
我无法在selenium中找到一个元素，我使用了htmlUnitDriver。好的，驱动程序工作正常，但我无法找到谷歌搜索文本框元素。:无法使用.(By.java:361) at org.openqa.selenium.htmlunit.HtmlUnitDriver$5.call(HtmlUnitDriver.java:1725) at org.openqa.selenium.htmlunit.HtmlUnitDriver$5.cal
浏览 0提问于2016-07-15得票数 0
回答已采纳
10回答
我找不到任何好的基于Java的web抓取API。我需要抓取的站点也不提供任何API；我想使用一些pageID遍历所有网页，并在它们的DOM树中提取HTML标题/其他内容。除了网络抓取之外，还有其他方法吗？
浏览 1提问于2010-07-08得票数 72
回答已采纳
2回答
我想抓取这个网站：，但这里有一个登录系统。我正尝试在原生Java应用程序中使用htmlUnit (稍后可能用于安卓系统)。但是我不明白如何找到合适的标签来允许用户在我的程序中输入他们的信息。
浏览 1提问于2014-04-05得票数 0
一个只能支持IE的应用程序，我不得不做屏幕抓取它的。我尝试过使用htmlUnit和selenium htmlUnit驱动程序，但这并不适合我。我想知道，对于IE浏览器，java中是否有无头浏览器api。请让我知道。
浏览 2提问于2016-10-19得票数 2
所以我尝试在HtmlUnit中设置元素的文本，但是由于某些原因，我不太理解抛出NullPointerException。显然，元素存在于页面上，并由htmlunit找到！at net.sourceforge.htmlunit.corejs.javascript.ScriptRuntime.hasTopCall(ScriptRuntime.java:3241)at net.sourceforge.htmlunit.corejs.java
浏览 0提问于2016-07-07得票数 1
1回答
我们正在使用HTMLUnitV2.6和Web-收获，并扩展了它的功能来创建一个新的元素<web-getpage url在net.sourceforge.htmlunit.corejs.javascript.ScriptRuntime.constructError(ScriptRuntime.java:3651)在net.sourceforge.<e
浏览 0提问于2010-05-26得票数 1
我无法让HtmlUnitDriver在我试图访问的页面上查找元素。另一方面，WebDriver工作得很好。两者都使用相同的方法。(HtmlUnitDriver.java:805)at org.openqa.selenium.htmlunit.HtmlUnitDriver$5.call(HtmlUnitDriver.java:1247)
浏览 5提问于2013-06-07得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
