JSoup UserAgent,如何设置正确？
关于JSoup UserAgent的设置，可以通过以下方法进行正确设置：
- 导入JSoup库
首先，确保已经导入了JSoup库。如果使用Java，可以在pom.xml文件中添加以下依赖：
<groupId>org.jsoup</groupId>
<artifactId>jsoup</artifactId>
<version>1.14.3</version>
</dependency>- 设置UserAgent
在使用JSoup进行网页请求时，可以通过设置User-Agent请求头来模拟浏览器行为。以下是一个Java示例：
import org.jsoup.Connection;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
public class Main {
public static void main(String[] args) {
try {
String url = "https://example.com";
Connection connection = Jsoup.connect(url);
connection.userAgent("Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3");
Document document = connection.get();
System.out.println(document);
} catch (Exception e) {
e.printStackTrace();
}
}
}在这个示例中，我们使用connection.userAgent()方法设置了一个模拟Chrome浏览器的UserAgent。这样，当我们请求网页时，服务器会认为我们使用的是Chrome浏览器，而不是JSoup库。
- 注意事项
- 在设置UserAgent时，请确保使用的UserAgent是合法的，并且遵循相关法律法规。
- 不同的编程语言和库可能有不同的设置UserAgent的方法，请根据实际情况进行调整。
- 在进行网络爬虫时，请遵循目标网站的robots.txt文件规定，尊重网站的访问规则，避免对目标网站造成不必要的负担。
推荐的腾讯云相关产品：
- 腾讯云API网关：帮助用户处理复杂的请求和响应，并提供安全、稳定、高可用的API服务。
- 腾讯云服务器：提供弹性、可扩展的云计算服务，满足各种应用场景的需求。
- 腾讯云对象存储：提供可靠、安全、低成本的云存储服务，支持海量数据的存储和管理。
- 腾讯云数据库：提供各种类型的数据库服务，包括关系型数据库、非关系型数据库等，满足不同应用场景的需求。
以上是关于JSoup UserAgent的设置方法以及推荐的腾讯云相关产品。如果有其他问题，请随时提问。
相关·内容
1回答
我试图刮一个可能需要认证的网站。当我尝试以下代码时，会得到一个错误：
org.jsoup.UnsupportedMimeTypeException:未处理的内容类型。必须是text/*、application/xml或application/xhtml+xml。Mimetype=application/json；charset=utf-8，org.jsoup.helper.HttpConnection$Response.execute(HttpConnection.java:547) at org.jsoup.helper.HttpConnection$Response.execute(Ht
浏览 0提问于2018-03-09得票数 0
1回答
我试着用Jsoup开发几个urls。其中一个例子是：
当我这么做时：
Document doc = Jsoup.connect(url).get();
它抛出
Exception in thread "main" java.net.SocketTimeoutException: Read timed out
但是，当我设置一个useragent字符串时，它可以正常工作。
Document doc = Jsoup.connect(url).userAgent("Chrome").get();
尽管它不适用于其他UserAgent字符串：
Document doc
浏览 0提问于2014-08-30得票数 0
回答已采纳
显然，sun.net.www.protocol.http.HttpURLConnection总是会在UserAgent后面附加"Java/version“。因此，JSoup Connection.userAgent不能将用户代理设置为您想要的内容；无论如何都会附加“Java/版本”内容。
请参阅
一些网站拒绝在用户代理中的任何位置包含"Java“的请求，给出各种4xx和5xx HTTP错误。
上面提到的StackOverflow帖子建议使用Apache来代替Sun connection类，但是如果我想使用JSoup，这不是一个选项。
我想知道JSoup团队对此有何看法。我的描述
浏览 1提问于2015-05-20得票数 3
我想使用Jsoup来访问位于网络服务器上的网站的一些数据。每次我尝试通过有效的URL进行连接时，我都会检索到一个带有以下错误的HttpStatusException：
Exception in thread "main" org.jsoup.HttpStatusException: HTTP error fetching URL. Status=500, URL=http://sv.thisismydomain.de/path/xyz.jsp (我已经更改了URL)
这是我的尝试：
System.out.println(Jsoup.connect(urlBase + urlLo
浏览 3提问于2014-05-16得票数 0
1回答
当使用JSoup解析flashscore服务器时，我有无法读取的字符。Jsoup代码：
document = Jsoup.connect(URL + LABEL + SEASON + 1 + END)
.userAgent(USER_AGENT)
.header("x-fsign", FSIGN)
.get();
服务器响应：
<html>
<head></head>
<body>
S
浏览 0提问于2020-04-30得票数 0
2回答
我试着用Jsoup登录twitter，因为我想刮掉我的推特，然后通过SMS发送给我，我知道如何从HTML中处理它们，我知道如何通过SMS发送它们，我需要逐步登录帮助，我无法登录twitter，我尝试的是在后台处理can视图(没有任何UI )(注意:应用程序没有Ui )，但是失败了，因为没有UI它是无法处理的。
final String usernameKey = "session[username_or_email]";
final String passwordKey = "session[password]";
final String loginFormU
浏览 4提问于2017-10-15得票数 0
回答已采纳
1回答
考虑下面的url 。当我将这个url传递给JSOUP时，html内容并不准确。但是，当我在浏览器中打开这个url时，它将重定向到。
然后，我将这个url传递给jsoup，现在我得到了精确的html内容。
如何从第一个url中获得精确的html内容？？
我已经尝试了很多选择
Response response = Jsoup.connect(url).followRedirects(true).timeout(timeOut*1000).userAgent(userAgent).execute();
int status = response.statusCode
浏览 3提问于2015-12-17得票数 3
回答已采纳
我在试着从网站上获取数据。当我在Intellij IDEA中使用这段代码时，一切都很好，但是当我在Android和真正的设备中使用这段代码时，我得到：
org.jsoup.HttpStatusException: HTTP错误获取URL。Status=403
这是我的代码：
private static final String URL = "http://www.openaip.net/airports?apttype_type_filter=All&country_filter=All&name_filter=EHAM";
private stat
浏览 3提问于2017-11-14得票数 2
回答已采纳
1回答
我正在尝试使用Jsoup登录这个网站：
我使用了下面的代码：
String url = "https://www.startus.cc/user/login";
String userAgent = "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/43.0.2357.130 Safari/537.36";
Connection.Response response = Jsoup.connect(
浏览 0提问于2017-10-20得票数 1
1回答
将代理设置为使用JSOUP失败
、、、、
我试图设置代理来进行废弃的谷歌新搜索。
但是，似乎出现了以下错误：
Exception in thread "main" java.lang.RuntimeException: Uncompilable source code - Erroneous sym type: org.jsoup.Connection.proxy.userAgent.ignoreHttpErrors.followRedirects.timeout.ignoreContentType.get
at javaapplication27.JavaApplication27.main(JavaAppl
浏览 7提问于2017-01-23得票数 0
2回答
我尝试用JSoup登录facebook，当使用控制台应用程序或Tomcat服务器webapp进行测试时，它运行得很好：
String userAgent = BrowserVersion.FIREFOX_38.getUserAgent();
Connection conn1 = Jsoup.connect("https://m.facebook.com");
Document document = conn1.userAgent(userAgent).execute().parse();
Element form = document.select("form"
浏览 3提问于2016-05-07得票数 17
1回答
使用JSoup解析推特
、、、、
下面是我的代码：
Document doc = Jsoup.connect(urlString)
.userAgent("Mozilla/5.0 (X11; Linux i686) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/35.0.1916.114 Safari/537.36")
.get();
System.out.println(doc);
所以我使用了JSoup，并试图在一个安卓应用程序上解析Twitter标签页面的超文本标记语言(作为参考，类似于)。但是
浏览 4提问于2014-06-10得票数 2
我正在尝试通过jsoup在站点URL = 上注册
我在做什么：
Connection.Response loginForm = Jsoup.connect(URL) .userAgent("Mozilla/5.0").execute();
document = Jsoup.connect(URL)
.userAgent("Mozilla/5.0")
.data("email", mail)
浏览 0提问于2016-11-04得票数 0
1回答
我想刮重定向的tumblr网站，如果您试图转到一个不存在的tumblr页面，它就会出现。如果我把URL放在浏览器中，我就会到达那个重定向的站点。然而，Jsoup只是返回一个“HTTPErroringURL.Status=404”错误。有什么建议吗？
String userAgent = "Mozilla/5.0 (Windows; U; WindowsNT 5.1; en-US; rv1.8.1.6) Gecko/20070725 Firefox/2.0.0.6";
Document doc = Jsoup.connect("http://www.faszok
浏览 24提问于2015-11-18得票数 1
回答已采纳
如果我不调用userAgent()来为Jsoup设置用户代理字符串，那么默认的用户代理字符串使用什么呢？
Jsoup.connect("http://www.google.com/").get();
我在一个Android应用程序中使用Jsoup。
浏览 2提问于2015-10-27得票数 2
回答已采纳
1回答
我正在做一些网上刮我的银行帐户。所有请求都属于同一域。我是以这样的方式开始的:除了第一个请求之外，其他的都是res = Jsoup.connect().cookies(res.cookies())。应该重用Cookies，有些是在请求之间添加的。设置了一些POST和GET请求、用户代理和一些标头.
我得到了错误401，这意味着凭据问题- Fiddler已经表明，在最后一个请求中Jsoup没有发送cookie。没有迹象表明服务器要求删除一些cookie，而且网站在浏览器中运行良好，所以我认为问题就在我这一边。
令人惊讶的是，当我保存cookie以映射并将它们附加到此请求时，一切正常。我不能公开提
浏览 2提问于2016-01-01得票数 2
回答已采纳
在我的大数据项目期间，我必须开发一个JSOUP脚本来获取巴黎2018气象数据并存储它们 public static final String USER_AGENT = "Mozilla/5.0 (Windows NT 10.0;
Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/73.0.3683.86
Safari/537.36";
int numberDay = 1;
for(numberDay=1; numberDay<32 ; numberDay++ ) {
浏览 70提问于2019-04-03得票数 0
回答已采纳
我试着用珍汤来爬这个
Document dok = Jsoup.connect("http://bola.kompas.com/ligaindonesia").userAgent("Mozilla/5.0").timeout(0).get();
但是出现了这样的错误：
java.io.IOException: Too many redirects occurred trying to load URL http://m.kompas.com/bola
当我输入这个：
Document dok = Jsoup.connect("http://m.kompa
浏览 4提问于2016-02-19得票数 1
回答已采纳
1回答
我想通过jsoup从iframe中检索内容，但得到以下错误消息：“您的浏览器不支持内联框架或当前配置为不显示内联框架...”
代码：
Jsoup.connect(URL).userAgent(USER_AGENT).get().getElementById(ID);
我也尝试过使用java.net.URLConnection和Apache HttpClient。我想可能是用户代理出了问题，目前
Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.87 Safar
浏览 1提问于2017-07-07得票数 0
1回答
我使用了spring boot和Jsoup来解析html页面。我按如下方式连接页面：
try {
doc = Jsoup.connect(SOME_URL)
.userAgent("Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2228.0 Safari/537.36")
.referrer("http://www.google.com")
浏览 12提问于2018-01-03得票数 0
1回答
是否可以为Jsoup连接设置Accept-Language参数。我已经尝试过了：
Jsoup.connection(url).userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64; rv:21.0) Gecko/20100101 Firefox/21.0").get();
Jsoup.connection(url).userAgent("Mozilla/5.0 (Windows; U; WindowsNT 5.1; en-US; rv1.8.1.6) Gecko/20070725 Firefox/2.0.0.6").get(
浏览 1提问于2013-06-27得票数 2
回答已采纳
我正在尝试使用Jsoup库(1.11.3版)读取域- iv4u.health的URL，但是得到了“太多重定向”错误。下面是我使用的代码-
public class Example {
public static void main(String[] args) throws InterruptedException, ExecutionException {
crawlDomain("http://iv4u.health");
}
public static void crawlDomain(String url) {
int timeout = 30;
浏览 1提问于2019-01-10得票数 0
我的Android应用程序使用Jsoup连接到网站
implementation group: 'org.jsoup', name: 'jsoup', version: '1.11.2'
我的logcat有以下消息
OkHttpClient: A connection to http://www.xxx.yyy.zzz/ was leaked. Did you forget to close a response body?
我的jsoup连接类似于：-
final Document feedNavigator = Jsoup.connect(u
浏览 2提问于2018-02-16得票数 4
我得到404，同时访问一个网页，通过jsoup。但是，当通过浏览器进行访问时，页面会很好地加载。
几天前，我通过jsoup访问了这个页面。但现在它扔了404。尝试添加用户代理，超时等，但没有运气。
在Firebug中，我得到404的请求，但是页面在浏览器中加载得很好。
不确定页面是如何在浏览器中呈现的，但不是通过Java程序呈现的。
Document doc = Jsoup.connect("http://example.com/stock.php?"+quote).userAgent("Mozilla/5.0 (Windows NT 10.0; WOW64) Appl
浏览 1提问于2016-04-09得票数 6
1回答
我目前正在尝试用jsoup编写一个登录到mijn.nuon.nl的程序。当我使用浏览器访问页面时，我会被重定向到一些很长的URL，而我的代码无法到达这些URL。有没有人能帮我找出发帖的正确网址，也许还能看看我的代码？非常感谢
Connection.Response res = Jsoup.connect("https://nuon.nl/service/mijn-nuon").referrer("https://nuon.nl/").userAgent("Mozilla/5.0").timeout(1000 * 100000).followRed
浏览 0提问于2018-06-10得票数 0
我试图使用java和youtube.com来获得JSoup的响应。
我可以使用JSoup获得youtube的响应，如下所示，它返回桌面网站的响应
String str = "https://www.youtube.com/";
doc = Jsoup.connect(str)
.userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/30.0.1599.101 Saf
浏览 5提问于2016-03-28得票数 2
1回答
我一直在JSOUP代码中随处可见。
Useragent设置为Mozilla。
如果我想将其设置为、google、chrome或opera呢？
Jsoup.connect(url)
.userAgent("Mozilla");
我怎么能做到这一点？提前谢谢。
浏览 1提问于2012-04-17得票数 6
回答已采纳
我正在尝试使用从ASP页面中获取两个值。
代码如下：
package webscraper;
import java.io.IOException;
import org.jsoup.Connection;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.nodes.Node;
import org.jsoup.select.Elements;
public class WebScraper
{
public stati
浏览 0提问于2012-03-12得票数 1
1回答
我使用java来简单地从网站BNN跟踪股票的变化，并且我已经将其全部设置为访问正确的值。但是，我得到的不是数字值，而是{{quoteObj.openPrc | number:2 }}。如何访问网站上显示的数值？
另外，如果你能帮我在这个网站上获得当前的价值，那将是非常有帮助的。
//编辑//
org.jsoup.nodes.Document doc = null;
try {
doc = Jsoup.connect("https://www.bnn.ca/stock/ACB.TO").userAg
浏览 0提问于2017-11-29得票数 0
2回答
我试图使用JSoup解析如下所示的结构。
<div class="bigClass">
<a href="foo.com"> Field 1</a>
<a href="bar.com"> Field 2</a>
<a href="baz.com"> Field 3</a>
</div>
现在，我正在使用下面的代码获取-- div类"bigClass"的全部文本内容
doc = Jsoup.conn
浏览 8提问于2015-12-27得票数 2
回答已采纳
我得到了：
org.jsoup.HttpStatusException: HTTP错误获取URL。Status=403
在以下代码中。
try {
String url = "https://pixabay.com/ko/videos/";
Document doc = Jsoup.connect("https://pixabay.com/ko/videos/")
.userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_2) AppleWebKit/
浏览 0提问于2020-02-26得票数 1
1回答
你能帮我用JSoup登录aspx网站吗？
我的代码；
package jsouplogin;
import java.io.IOException;
import org.jsoup.Connection;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
public class JSoupLogin {
public static void main(String[] args) throws IOException {
Connection.Response loginForm = Jsoup
浏览 18提问于2017-01-06得票数 0
1回答
代号为一个HTML解析
、、、
我正在创建一个Iphone应用程序。我需要在laber上显示网页的一部分，代号为一个或相当于安卓上的TextView。
在Android系统中，我使用jsoup
如何在代号1上实现此代码：
Document document = Jsoup.connect(url)
.userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64; rv:5.0) Gecko/20100101 Firefox/5.0")
.get();
Elements e
浏览 3提问于2015-12-27得票数 1
回答已采纳
1回答
我试图解析来自amd.com的数据。在Opera页面中，查找，其中包含cpu的名称和链接到第三列中的页面。但是当我使用JSOUP时，它会让我得到。
获取文档的方法：
private Document getDocument(String url) {
try {
String userAgent = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.130 Safari/537.36 OPR/66.0
浏览 4提问于2020-02-16得票数 1
回答已采纳
1回答
我试着用JSOUP测试我的服务，但是我使用的是CORS，我只需要为测试服务器发送源文件，但是当我发送这个时，我不会在服务器端接收到，总是收到null。
Connection con = Jsoup.connect("http://localhost:8080/myservice");
con.userAgent("Mozilla");
/* the origin is replaced to null automatically*/
con.header("Origin", origin);
con.ignoreHttpErrors(tr
浏览 0提问于2018-03-15得票数 2
回答已采纳
我正在尝试登录一个网站使用JSoup，但我有麻烦，让that.system.out.println显示我登录不好！在模拟器中，只是登录网址显示，什么也没有发生。请帮帮我，我不确定URL或登录数据是否不正确。
url是，我目前正在尝试使用下面的代码：
protected Void doInBackground(Void... params) {
// Create an array
arraylist = new ArrayList<HashMap<String, String>>();
try {
浏览 1提问于2016-01-01得票数 1
我用JSoup做我的网络爬虫
Connection con = Jsoup.connect("http://t.co/uySIPVNfgP");
Document doc = con.get();
String u = doc.baseUri();
以上给出重定向url作为基uri。
但是，将用户代理设置为：
con.userAgent("Mozilla/5.0 (Windows; U; WindowsNT 5.1; en-US; rv1.8.1.6) Gecko/20070725 Firefox/2.0.0.6");
与以上不跟随重定向。
如我所知，没有用户代
浏览 3提问于2015-10-01得票数 1
回答已采纳
1回答
使用jsoup进行奇怪的编码行为
、、、、
我使用jsoup从不同页面的html源码中提取一些信息。其中大部分是UTF-8编码的。其中一个是用ISO-8859-1编码的，这导致了一个奇怪的错误(在我的选项中)。
包含错误的页面是：
我用以下代码读取了所需的字符串：
Document doc = Jsoup.connect("http://www.gudi.ch/armbanduhr-metall-wasserdicht-1280x960-megapixels-p-560.html").userAgent("Mozilla").get();
String title = doc.getElementsByC
浏览 1提问于2011-10-10得票数 3
回答已采纳
2回答
我想找到正确的方法来为我的爬虫设置接受语言头吗？我读到了其他相关的答案，如和，但它们对我不起作用(我得到了这个错误：“方法未定义为类型连接”，这里是代码的一部分：
String baseUrl = "http://www.imdb.com/search/title?at=0&count=250";
org.jsoup.Connection con = Jsoup.connect(baseUrl).userAgent("Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/535.21 (KHTML, like Gecko) C
浏览 5提问于2014-05-23得票数 1
回答已采纳
1回答
我一直在努力登录到页面，这样我就可以抓取隐私了
学习.sun.ac.za/
呼了一段时间。我已经搜索了多个这样的帖子，并试图从每一个应用这些建议而没有效果。
尝试1
String url = "https://sso-prod.sun.ac.za/cas/login?service=http%3A%2F%2Flearn.sun.ac.za%2Flogin%2Findex.php";
String userAgent = "Mozilla/5.0";
Connection.Response response = Jsoup.con
浏览 2提问于2016-03-28得票数 0
回答已采纳
1回答
我需要使用primary_URL中的CFscript来获取和解析一个页面。
如果页面状态不确定，或者数据损坏或空，我应该从secondary_URL尝试另一个页面。
primary_URL只接受POST请求，我不知道如何在cfscript中这样做
默认情况下，secondary_URL接受GET
这是一个想法：
<cfscript>
jsoup = createObject("java", "org.jsoup.Jsoup");
response = jsoup.connect(primary_URL).userAgent("#CGI.Htt
浏览 1提问于2016-03-29得票数 2
回答已采纳
我正在用midje和jsoup测试我的第一个clojure环应用程序。该应用程序使用为只登录的页面添加session。会话不是cookie，也不是请求头的一部分，我不知道如何添加它以在日志记录的页面上正确执行post请求.
POST请求在jsoup中是这样的：
(-> (Jsoup/connect "http://localhost:3001/sendto")
(.userAgent "...")
(.header "Content-Type","application/x-www-form-urlencoded&#
浏览 2提问于2019-07-22得票数 1
我想解析Google新闻搜索:1)文章名称2)预览3) URL
要做到这一点，我应该对网页结构进行修改。
Elements links = Jsoup.connect(google + URLEncoder.encode(search , charset) + news).userAgent(userAgent).get().select( ".g>.r>.a");
主要在此：
( ".g>.r>.a")
如何修改？
完整代码：
public static void main(String[] args) throws Un
浏览 1提问于2016-09-22得票数 1
回答已采纳
1回答
我正在使用安卓系统中的HTML进行Jsoup解析，我遇到了一些奇怪的事情(对我来说)。一些站点使用简单的Jsoup.connect(String).get()方法可以很好地工作。
但在其他一些网站上，我总是得到一个EOFException。因此，我搜索并处理userAgent属性，当我使用Jsoup.connect(String).userAgent("Mozilla").get()时，它工作得很好。
"mozilla“到底是什么意思？我的应用程序只能在安装了Mozilla的设备上工作吗？
浏览 0提问于2016-04-26得票数 0
回答已采纳
1回答
我引用答案来解析google搜索结果。
但是，当我尝试代码时，会出现.Error。
我该怎么做修改？
import java.net.URLDecoder;
import java.net.URLEncoder;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements ;
public class JavaApplication22 {
public static void main(String[] args) {
String google = "h
浏览 0提问于2016-09-20得票数 0
回答已采纳
我正在使用Jsoup来解析一个网站的HTML。昨天以前一直很好。但是现在我开始收到这个错误：
获取URL的HTTP错误。Status=404，URL=
这个网站在浏览器上运行得很好。但不使用Java。我使用的代码如下：
Document doc = Jsoup.connect(srcLink)
.userAgent("Mozilla")
.maxBodySize(0)
.timeout(20000)
.followRedirects(true)
浏览 2提问于2014-05-15得票数 0
1回答
在一些之后，我想通过登录来实现一个爬行器，如：
import org.jsoup.Connection;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
public class JsouptTest {
public static void main(String[] args) throws Exception {
int x = 1;
Connection.Response loginForm = Jsoup.connect("https://target.helpsh
浏览 2提问于2016-01-18得票数 2
回答已采纳
我正在使用jsoup发出http post请求来登录到这个页面：
try {
Response r = Jsoup.connect("https://home-access.cfisd.net/HomeAccess/Account/LogOn?ReturnUrl=%2fhomeaccess%2f")
.data("LogOnDetails.UserName", "s650665")
.data("LogOnDetails.Password", &
浏览 0提问于2014-12-25得票数 0
我对OOP和JSoup非常陌生，所以我不知道出了什么问题。我有一个没有使用OOP的代码版本，它正确地显示了网页的标题，但是我的getTitle()方法在这段代码中返回null。我要它返回网页的名称。我使用调试器并看到文档正在连接到网站。
package nld.dailyquotes;
import java.io.IOException;
import java.util.ArrayList;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org
浏览 2提问于2014-07-21得票数 1
回答已采纳
我用Jsoup取消了网站：
doc = Jsoup.connect(String.valueOf(urls[0])).userAgent("Mozilla").get();
以下是链接：
我在命令行的链接中添加了rpp=40参数，以显示每页40个结果。我能够在页面查看源中看到所有的结果。我知道Jsoup只用于静态内容，不能获取使用AJAX/JS库技术生成内容的网站。但是，为什么Jsoup不能通过页面查看源检索我在浏览器中看到的相同内容呢？页面查看源代码显示40个结果，而Jsoup只能从10个结果中检索元素？如何通过页面查看源获取所有可见的元素。
浏览 2提问于2013-02-16得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
