3回答
Web从ajax页面抓取数据
、、、、
我正在尝试从here上抓取职位。 我正在学习python抓取技术，但我遇到了抓取像这样的Ajax页面的问题。我能够使用第一页的以下代码获得开发人员工具的响应数据。如何从这些数据中提取职位。
浏览 54提问于2021-07-21得票数 1
3回答
我正在尝试从下面的morningstar网站上获取数据：
我现在遇到的问题不同于我抓取的简单网页，程序似乎找不到任何表格，即使我可以在页面的HTML中看到它们。在研究这个问题时，最接近的
浏览 3提问于2016-02-27得票数 3
1回答
我想用我编写的erb.html抓取脚本中的信息更新rails中的new页面，但我不希望每次有新信息进入时页面都要刷新。我该怎么做呢？
浏览 0提问于2012-06-15得票数 2
回答已采纳
2回答
我试图做隐藏在页面源代码的实际内容。例如，如果用户通过浏览器访问第一个或第二个etc页面，用户可以看到不同的信息，但当用户访问第二个页面并单击鼠标右键转到页面来源时，用户只能看到第一个页面信息。我希望在响应中避免实际的数据或信息。我的问题是，有可能做到这一点吗？如果有可能怎么办？请告诉我我是新来的网域。
浏览 0提问于2012-06-09得票数 0
回答已采纳
我目前正在尝试使用以下代码进行屏幕抓取：HttpWebResponseStreamReader(theResponse.GetResponseStream(), Encoding.UTF8)) string s = reader.ReadToEnd();但是，我关心的数据当我右键单击页面和ViewSource时，我也看不到我关心的HTML表-但是当我使用Firebug检查它时，我确实在
浏览 0提问于2012-06-22得票数 2
回答已采纳
1回答
google提供的示例显示，当用户单击按钮时，会发出AJAX请求，并在该div中显示结果。
但在我的示例中，当加载页面时，请求将异步执行，当结果可用时，它们将显示在另一个div中。关于下面的文件结构，我应该将AJAX请求放在哪里？我是否应该删除showResults方法中的行，并在AJAX请求成功时运行另一个操作？如果您能推荐一种结构，在AJAX请求以CakePHP 2方式成功时显示结果，我会很高兴的。
浏览 1提问于2012-05-17得票数 0
回答已采纳
1回答
我是蟒蛇和网络抓取的新手。
我试图从这个链接中提取关于临床诊断测试的测试成分的信息。单击每个名称将带您到另一个页面，其中包含有关单个测试组件的详细信息。我想从这一页中提取出有共同问题的部分。最后，将包含测试组件名称的数据框架放在一列中，将常见问题中的每个问题作为其余的列(如下所示)放在一起。
浏览 1提问于2018-01-19得票数 0
在C#中有没有一种方法可以获得AJAX或Java的输出？我试图做的是获取网页上项目的细节，但是网页不会将其加载到原始源中。有没有人有好的教程或者好的起点？
例如，我想从获取所有的汽车列表
浏览 1提问于2011-06-06得票数 1
回答已采纳
2回答
我使用Python语言和BeautifulSoup来抓取存储。我想知道比价网站是如何从所有在线商店中抓取数据的？他们对不同的在线商店有不同的代码，还是有通用的代码？他们会研究每个在线商店的HTML模式吗？
浏览 40提问于2014-12-28得票数 7
回答已采纳
我有一个标准的html注册页面，目标是提交一个外部.asp页面。现在发生的情况是，.asp (我无权访问)返回整个html页面。
浏览 1提问于2012-09-13得票数 0
回答已采纳
1回答
在阅读了一些web抓取教程后，我尝试过使用Selenium。
其目的是web/屏幕抓取在Ajax调用之后加载所需数据的页面，当(此ajax调用是在初始页面加载之后进行的)..第二个目标是在后台运行Selenium代码(不打开任何浏览器)，以允许加载页面(包括Ajax调用)、检索最终的HTML并在本地执行所需的处理。其次，请告诉Selenium如何等待Ajax调用完成，然后
浏览 2提问于2013-03-16得票数 0
回答已采纳
2回答
我有一个web应用程序，当您转到一个页面时，会进行ajax调用以从数据库中获取所有数据。它将数据存储到全局变量中，当用户向下滚动页面时，它会将更多的数据加载到页面中。现在，我希望能够调用数据库，并在向下滚动时从数据库中抓取20个项目，而不是在页面加载时获取所有项目。有什么好方法可以做到这一点吗？谢谢你的帮助。下面是我想要做的事情
浏览 1提问于2012-03-10得票数 0
回答已采纳
我正在使用PHP从网页上抓取一些信息，然而，我发现我试图从页面上抓取的信息是通过某种AJAX/javascript方式加载的。我以为我记得Curl可以遍历javascript，但我发现事实并非如此。我似乎记得某种后端的"web浏览器“库/函数，它可以通过javascript和AJAX追踪，得到一个功能齐全的浏览器所能达到的最终页面结果。
有没有可以做到这一点的库或函数？它不一定要很漂亮--我只需要
浏览 0提问于2012-06-17得票数 0
回答已采纳
当我选择不同的选项时，页面的内容会动态变化。我想知道是否有一种方法可以从python脚本中更改选项，以便从<select>标记中的所有不同选项的所有不同页面获取内容。
浏览 6提问于2012-09-10得票数 4
我有一个使用Jquery Mobile构建的web应用程序。问题是，当我在菜单中单击一个链接时，css和jquery不能正确加载。只有当页面通过ajax请求抓取时，才会发生这种情况。当禁用ajax请求或刷新页面时，布局将恢复正常从菜单中，当您单击profile链接时，您将看到布局完全混乱。一旦刷新，它就会恢复正常。
谁能告诉我可能是什么原因造成的？我想让它在不禁用ajax请求来抓取页面的情况下工作
浏览 0提问于2017-04-11得票数 0
1回答
我正在尝试获取上的“已添加联系人”POST /dwr/call/plaincall/UserActionAPI.getRecentlyTitleChangedContacts.dwrwww.jigsaw.com/dwr/call/plaincall/UserActionAPI.getRecentlyAddedContacts.dwr"
但它总是返回，即使我可以在Wir
浏览 4提问于2010-08-19得票数 0
回答已采纳
1回答
显示内部页面的加载微调器
、、、
我正在使用jQuery 1.1.1和HTML5构建一个web移动应用程序。我发现在jQuery文档中有一个选项，但仅用于外部页面。这是我问题的答案“谢谢你的帮助”。$.ajax({ url: "js/dat
浏览 0提问于2012-07-22得票数 0
回答已采纳
3回答
有没有人在进行ajax调用时有一套完整的从头到尾的步骤？它和http请求有什么不同吗？通过感知，似乎一个ajax填充的网页比一个php填充的网页需要更多的时间:两者都访问相同的数据库，相同的记录数量，相同的显示，不同之处在于在发送和jquery读取json并填充form...could之前使用内联
浏览 1提问于2009-07-30得票数 2
回答已采纳
10回答
我找不到任何好的基于Java的web抓取API。我需要抓取的站点也不提供任何API；我想使用一些pageID遍历所有网页，并在它们的DOM树中提取HTML标题/其他内容。除了网络抓取之外，还有其他方法吗？
浏览 1提问于2010-07-08得票数 72
回答已采纳
1回答
我刚刚开始使用Python Web抓取请求。这可能是一个宽泛的问题，我会尽量简短。我遇到过这样的情况，有时可以用r.content下载整个页面源代码(其中r是请求的get调用的响应对象)我想知道一个网站可以在多少个这样的地方存储数据？(只是名字，我不是在寻找如何到达那里)
对于最后一种类型的网站
浏览 0提问于2014-09-26得票数 0
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号