4回答
我正在用PHP做一个新闻网站项目，对于这个项目，我想使用jQuery/JavaScript从其他新闻网站获取内容。jQuery有没有从其他域名抓取内容的功能？使用jQuery删除内容会占用大量的CPU吗？
在Stack Overflow中，我读到了jQuery.get()函数，是否可以使用此函数从其他站点抓取内容？
浏览 3提问于2012-02-22得票数 2
回答已采纳
我得抓取一些新闻网站。我已经在Hadoop 2.7.4和Hbase集群上安装了apache Nutch 2.3.1。我必须通过solr 6.6.1提供搜索。在抓取一些网站后，我观察到Nutch抓取页面中的所有内容。在新闻网站中，有包含最新或热门新闻等内容的侧栏。这些侧栏内容会随着时间的推移而变化。有没有办法让Nutch抓取主要故事内容，并避免这样的侧栏。
浏览 1提问于2017-11-08得票数 0
3回答
每天从另一个网站抓取内容
、、、
我正在创建一个网站，其中有一个“新闻”选项卡。我想在新闻选项卡上看到的是来自另一个新闻网站的更新内容。有没有办法抓取另一个网站上发布的纯文本，将其发布在我网站的新闻选项卡上，并在该网站发布新内容时自动更新？有没有人能把我推向正确的方向，这样我才能学会如何做到这一点？我知道HTML很好，但缺乏PHP和Javascript的技能。我需要学习什么才能做到这一点？
浏览 0提问于2013-01-18得票数 5
回答已采纳
我经营着一个新闻网站，每年有几十万的浏览量。每当有新内容发布时(每个周日晚上)，作者喜欢在facebook上发布新内容的链接。然而，据我所知，facebook每24小时才抓取一次网站。网站上的所有页面(特别是新闻文章本身)都使用完整的开放图形数据进行标记。facebook linter将始终正确显示嵌入的opengraph数据。然而，在它抓取新页面之前，它们不会在facebook上正确显示。整个网站都是动态php --谁能把我带到正确的方向？也许代码可以修改为在每篇<e
浏览 1提问于2012-09-23得票数 0
近期，谷歌要推出一项“Google News Initiative”的项目，目的是清除线上以及突发新闻状况下的虚假新闻。那么，智能推荐算法是如何筛选假新闻的呢？为什么会存在推荐假新闻的情况？
浏览 909提问于2018-03-21
1回答
我正在开发一个网站，应该得到其他网站的新闻内容，类似于。但不需要重定向到主持人那里去阅读新闻内容。
现在的问题是，我不知道什么是最好的方式得到的内容完全。我知道，我可以使用RSS提要为每个网站，但它只有一个简短的描述，每个新闻，而不是整个故事。我也读过这样的相关问题：，，但都没有解决我的问题。现在我想问的是，如果有必要直接访问这些网站，从不同的网站获取整个新闻内容的最好方法是什么？对不起，因为我的英语不太好，如果我的问题不够清楚，我可以提前解释，谢谢。
浏览 5提问于2014-08-14得票数 1
回答已采纳
1回答
我正在开发React Native上的一个新闻应用程序。为此，我在木偶剧上做了一个新闻采集器。问题出在iframe中。我拿不到。我尝试评估页面并使用querySelector。它找不到它。我该怎么办？我只想获得iframe内容或链接来显示它。在那里，我需要取一个电报iframe。我已经成功地抓取它的标题，内容，文章照片等。所以，我只需要的代码为iframe抓取。
浏览 14提问于2021-06-05得票数 0
回答已采纳
我有一个网站，我需要抓取。 https://www.dawn.com 我的目标是抓取所有带有关键字“巴基斯坦”的新闻内容。 到目前为止，如果我有URL，我只能抓取内容。
浏览 16提问于2020-09-30得票数 0
1回答
我已经使用Joomla的Xmap组件为我的网站提交了Google新闻站点地图，我今天收到了如下通知http://www.thepeshawar.com/index.php</e
浏览 4提问于2012-12-08得票数 4
回答已采纳
到目前为止，我已经为意大利足球新闻网站()制作了HTML。
我的webapp有一个选项卡，您可以根据主题选择新闻，我成功地做到了这一点，这要感谢()，它是我用来从网站上抓取新闻的工具。现在，，这是一个问题，：如果我单击带有图片和新闻的简短摘要的链接，就会明显地加载新闻的外部页面。但这不是我想要的:我想要的是，当我点击新闻时，它应该以某种方式创建一个页面，其中的新闻内容会再次从该新闻的页面中刮出(我只需要图片和
浏览 1提问于2013-01-01得票数 1
2回答
我从来没有做过这样的事情，所以我真的不确定我需要在PHP中使用什么工具来实现这一点。我正在做一个“最近的新闻项目”(只是标题)的列表，它将显示在网站的一侧，并希望能够查找新闻帖子中的第一张图片(我假设这与查找img标记和加载src有关，但我不确定如何做到这一点。新闻帖子存储在一个MySQL数据库中，并被提取到一个变量$newsPost中。
谢谢你的帮助。
浏览 1提问于2010-06-24得票数 0
回答已采纳
1回答
嗯，我有一些爬虫可以从不同的新闻机构网站上抓取新闻，然后自动发布到我自己的网站上，问题是我的页面会在谷歌上找到索引，但即使我搜索的是完全相同的单词，它也不会出现。或者，从根本上说，抓取另一个网站并将其内容作为自己的内容发布是没有用的吗？
浏览 0提问于2013-08-13得票数 0
回答已采纳
1回答
我用Hostinger在我的网站上设置了一个cron作业，用来抓取新闻内容并将信息转储到文本文件中。这不是我想要的cron输出，而是运行脚本的副产品。PHP Warning: fopen(..failed to open stream: No such file or directory in /home/u189772133/public_h
浏览 1提问于2017-09-10得票数 1
回答已采纳
2回答
他们是否有办法在没有任何浏览器的情况下，在抓取html之后执行网页javascript的加载事件。即我需要抓取网页内容通过javascript呈现例如bbc新闻网页的视频在页面加载后通过javacscript呈现，我对抓取视频链接和镜头描述感兴趣。
浏览 0提问于2012-06-27得票数 1
2回答
Web抓取特定内容
、、、
我正在尝试从购物网站中抓取内容，然后将其保存在我的数据库中的表产品中。抓取这些内容需要知道每个站点的DOM结构。不仅是DOM结构，还包括菜单中的类别层次结构。有一个类似的解决方案来处理新闻，比如Readability，它查找<p>标签和图像的序列。由于新闻网站与简单结构的相似性，使得新闻更容易发布，
浏览 5提问于2013-09-01得票数 2
回答已采纳
我创建了一个新闻面板，在其中我们使用下面的代码来显示新闻：$query = $this->db->get('news');
{在正确的地方，所有的数据都会被抓取并运行良好，
但是我们试过了，当我们点击“<
浏览 9提问于2015-06-15得票数 0
回答已采纳
1回答
现在我有了新闻类别、新闻和新闻图像表格结构，如：
我想列个清单如下：
我是如何用雄辩的关系( whereHas或Has )来制作这样的列表的?
PS:有时新闻没有图像
浏览 2提问于2014-05-22得票数 0
1回答
我一直在评估网络抓取的科学。我使用的框架是Python/Scrapy。我相信可能还有更多。我的问题更多地围绕着基础知识。假设我必须抓取新闻内容。因此，我抓取一个页面，然后编写选择器来提取内容、图像、作者、发布日期、子描述、评论等。
问题是，我如何优化它，使其可扩展到大量数据源。例如，可能有数千个新闻站点，每个站点都有自己的html/页面结构，因此我不可避免地需要为每个站点编写一个抓取逻辑。虽然这是可能的，但这将需要一个庞大的资源团队
浏览 2提问于2014-09-19得票数 2
我正在构建一个应用程序，抓取某个网站，并在列表视图中呈现最新的新闻，html格式与图像，标题和摘要。当用户单击一行时，将显示新闻文章。它的工作原理有点像CNet应用和类似的新闻应用。我对抓取部分没有问题，但我对如何管理摘要列表有疑问。
我最初的想法是有一个列表视图，其中每个项目都是一个webview。列表视图由填充了抓取的html内容的自定义ArrayAdapter填充。
浏览 5提问于2011-06-20得票数 2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
