我在想，我们需要一些嵌入式网页，但这看起来就像是用大锤敲坚果一样。编辑:在浏览RSS提要时关闭javascript之后，仍然返回XML格式的提要数据，这在某种程度上加剧了我的困惑。
浏览 0提问于2013-11-19得票数 1
4回答
抓取网页内容
、、、、
我正在开发一个项目，我想在后台抓取一个网站的内容，并从那个抓取的网站获得一些有限的内容。例如，在我的页面中，我有"userid“和"password”字段，通过它们，我可以访问我的邮件，抓取我的收件箱内容，并将其显示在我的页面中。
我通过单独使用javascript完成了上面的工作。
浏览 0提问于2009-02-25得票数 19
10回答
我找不到任何好的基于Java的web抓取API。我需要抓取的站点也不提供任何API；我想使用一些pageID遍历所有网页，并在它们的DOM树中提取HTML标题/其他内容。除了网络抓取之外，还有其他方法吗？
浏览 1提问于2010-07-08得票数 72
回答已采纳
我会在我的Java应用程序中使用Apache从一个或多个网站抓取网页。基本上，为了处理页面内容(文本等)，我需要为web爬虫找到的每个网页调用我的Java应用程序的方法。如何做到这一点？
浏览 7提问于2016-06-01得票数 2
回答已采纳
3回答
我有一个网页，即php页面，它是一个表格。我想把这个页面带到java中，即在java页面中，我想使用.php页面的网址显示此表单。这是可能的吗?如果是的话，是如何实现的？有问题的澄清：
我有一个java网页。在这个网页上，我想要一个Iframe或任何类似的东西，它将显示一个使用php url的php表单，并执行保存操作。
浏览 1提问于2012-07-02得票数 0
回答已采纳
1回答
抓取Java网页
、、
我已经找到并阅读了相当多关于抓取的文章，但不知何故，作为一个初学者，我不知所措。我现在正在为获取实际内容/如何访问每个日期/选项的表并保存到例如pandas df中而烦恼。
有什么建议从哪里开始呢？
浏览 3提问于2019-02-19得票数 0
3回答
我想知道如何抓取使用AJAX在所呈现的网页上获取内容的网页。通常，这类页面的HTTP GET只会获取嵌入了JavaScript代码的HTML页面。但我想知道是否有可能以编程方式(最好是Java)查询这样的页面，并模拟web浏览器类型的请求，以便在AJAX调用之后获得HTML内容。
浏览 1提问于2010-02-08得票数 5
回答已采纳
1回答
解析网页
、、
问题是，当我用java加载页面并将其保存到文件中时，它不包含我需要的信息。当我单击页面上的“查看源”时，也没有任何信息。但是，当我下载页面(另存为)并用记事本打开它时，我能够找到我需要的东西。简而言之，java加载的网页不同于我下载并使用记事本打开的网页。
如何将页面加载到字符串中，使其看起来与我在计算机上下载的页面相同？
浏览 4提问于2014-07-02得票数 2
回答已采纳
3回答
试着抓取网页内容
、、、
我想得到这个网页的单词列表： (你应该输入的单词列表)，我已经从HTML中得到了单词列表，但是我无法得到它的内容。有人能帮我吗？
浏览 7提问于2022-06-11得票数 1
回答已采纳
我可以使用php获得一个普通页面的html内容。但我打算获得一个页面的内容，当你向下滚动时，它会动态增长(就像在facebook中一样)。我应该如何获得这样一个页面的内容呢？
谢谢!
浏览 1提问于2012-06-04得票数 0
我正在使用solr 6.4.1，并使用下面的内容来抓取一个urljava -Ddata=web -Dc=corename -jar post.jar (urlname )我遇到了以下问题：
URL (urlname)导致重定向到(urlname)/us/ SimplePostTool:警告: URL (urlname)返回的HTTP status为301 0索引的网页
浏览 0提问于2017-03-15得票数 0
我想爬下网页，执行.org域，并为文本挖掘提供存档。在谈到背景之后。
在抓取过程中，还检测到空白、.org、域携带网站的数量。有什么标准，我们可以用来避免爬行网站有，没有内容？目前，我正在传递URL，它在Java中读取URL的Java内容。虽然网站没有任何内容，但仍然有HTML代码。你能建议我怎么做吗？我已经尝试找出文本可用性，图像可用性，但它是不可能阻止100%空白网页检测。
浏览 0提问于2019-03-13得票数 0
回答已采纳
我有一个问题，当使用Jsoup抓取一个网站，使用延迟加载和Jsoup不能访问足够的内容，我需要。有没有办法解决这个问题？
浏览 6提问于2019-09-30得票数 0
我的问题是基于一个我非常陌生的领域，所以如果可能的话，我希望能有一些耐心/有用的资源。这个想法对我来说是完全陌生的。我以前写过解析应用程序和xml文件的程序，但从来没有从网站上剥离过信息。因此，我完全迷失了方向。比方说，我想写一个简单的Windows phone7应用程序，它只允许我选择一个车站，然
浏览 0提问于2012-05-03得票数 1
回答已采纳
2回答
为了方便起见，我使用Java解析一个随机网站的超文本标记语言，假设它是。在解析HTML数据之后，我希望提取其中的一些数据，并将其显示在显示器上。之后，用户将输入搜索词，并按下一个按钮。
浏览 0提问于2012-03-30得票数 0
回答已采纳
我正在尝试抓取以下url ()，表内容是我感兴趣的内容，但是看起来表隐藏在某个地方：
右键单击表上的检查，我可以得到表(后面是)，但是在scrapy shell中，如果我执行response.xpath(‘//*@ ==$0’)，它不会返回任何内容，这意味着我不能通过这种方式抓取内容……请在这个问题上提供帮助，谢谢。更新:最终的解决方案是使用Selenium (伟大的工具)来完成这个任务，当网页内容如表格等被java</em
浏览 58提问于2018-05-17得票数 0
回答已采纳
2回答
通过java抓取网页
、、、、
我需要获取一个给定的网页，然后将HTML标记转换为XML标记，然后从这些XML标记中构建一棵树。我该怎么做呢?？请给我一些好的链接或基于这些的教程，顺便说一句，我使用的是Java语言。
谢谢。
浏览 0提问于2011-04-30得票数 0
回答已采纳
2回答
他们是否有办法在没有任何浏览器的情况下，在抓取html之后执行网页javascript的加载事件。即我需要抓取网页内容通过javascript呈现例如bbc新闻网页的视频在页面加载后通过javacscript呈现，我对抓取视频链接和镜头描述感兴趣。
浏览 0提问于2012-06-27得票数 1
因此，我正在开发这个android应用程序，以利用学校网页并检索html文档中的特定内容。问题是，当我在android中使用webview时，我只被允许使用整个页面。例如，从我下面代码中包含的网页中，我有一小段来自我希望这是唯一出现在网络视图上的东西。有什么建议吗？提前感谢！
浏览 1提问于2013-09-08得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
