解析urls，循环file_get_html(urls)，然后获取元素

文章/答案/技术大牛

发布

1回答

、、、、

我有一个网站，我需要解析它。首先，我必须解析页面中所有目录的urls，然后我需要输入所有urls，然后遍历所有urls并再次解析每个页面上的urls，然后遍历所有urls并获取元素('.description div')。但是当我想要遍历我第一次解析的所有urls时，我有一个问题。我收到了空页 include

浏览 12提问于2017-03-04得票数 0

回答已采纳

2回答

脚本结果的多次插入

、、、

我试图使用以下脚本将一些链接的内容导入数据库$html = file_get_html($url)->plaintext; $extract有什么方法可以用循环来完成吗?还是我必须用不同的逻辑来完成呢？

浏览 1提问于2017-10-31得票数 0

回答已采纳

2回答

如何使用简单的在<a>标记中获取url？

、、、

"nC"> </a> </li>如何在href中获取<div class="i">属性$html = file_get_html($link);foreach($html-&

浏览 2提问于2017-08-20得票数 2

回答已采纳

3回答

PHP简单HTML解析器删除字符/ str_replace

、、、

目前正在使用PHP简单的HTML DOM解析器，并遇到了一个非常奇怪的场景。我有一套urls，我正在爬行，并使用以下信息来获取我需要的信息： $html = file_get_html($url); [link] => link 2 )然后

浏览 5提问于2016-03-02得票数 1

回答已采纳

1回答

为什么simplehtmldom在没有错误的情况下将我踢出循环？

、、

我有大约70个不同的urls，我试图刮，但我的循环只有两个。在第二次迭代中，file_get_html($url)只将部分页面返回到$html中。嵌入的foreach循环将运行并打印出部分页面，然后它将我踢出两个循环，而不触及最后一个打印。最奇怪的是，它没有给出警告或错误。foreach($urls as $url) $html = file_get_html( $url );

浏览 5提问于2013-08-01得票数 0

回答已采纳

1回答

将两个小php代码集成在一起

我使用的是php简单的dom解析器。我有一个urls列表(即urls.txt)，我需要以纯文本格式下载它。我在这里试图实现的是迭代urls，提取html/文本，并将提取的文本增量地写入文本文件(即plain.txt)。php$Urls = fgets($Handler); whi

浏览 0提问于2014-05-08得票数 0

3回答

加载外部导航和更新链接

、、

如果不深入到这一点，我可以看到导航链接存在一个问题，即导航链接具有与原始域相关的urls，因此它们不能在blog.domain.com上工作。

浏览 1提问于2010-11-27得票数 0

回答已采纳

1回答

如何返回数组的文本值而不是函数的结果？

例如，如果我有一个包含一个元素的数组，如下所示：include "db.php";require 'simple_html_dom.php'; $dom = [file_get_html30-

浏览 5提问于2020-02-05得票数 0

回答已采纳

1回答

从嵌套的div中检索<img>s

、

我正在尝试从pinterest获取图片的urls，我已经尝试了下面的代码，但是getElementsByTagName返回了null。 img元素位于许多嵌套的div中。$html = file_get_html("https://www.pinterest.ca/search/pins/?

浏览 13提问于2018-02-14得票数 0

2回答

如何在URL中查找特定查询并显示整个链接

、

当前代码如下： // Create DOM from URL or file $html = file_get_html('

浏览 4提问于2013-09-04得票数 0

回答已采纳

1回答

file_get_html未能打开流：

、、、、

我得到这个函数是为了从外部URL获取一些信息。问题是，如果网站上有机器人，没有索引，这个函数就会崩溃，随后会导致foreach循环崩溃。var/www/vhosts/free-sitemap-generator.com/httpdocs/includes/cra/xml-functions.php中抛出 function file_get_html{ } $dom->load($conten

浏览 6提问于2017-03-03得票数 0

4回答

foreach循环的第一个结果

我使用以下代码从多个网站获取Facebook urls。一些网站包含多个指向Facebook的链接，但只想回显第一个找到的链接。$html = file_get_html('URL'); $word_fb = $element->href; ifwww.facebook") === 0) || (strpos($word_fb, "https://www.faceb

浏览 3提问于2013-07-08得票数 0

回答已采纳

2回答

如何使用简单html dom解析器跳过搜索中的重复内容

、、、、

现在，当我使用：$subhtml->find('a[href^="/wiki/"]')在foreach循环中迭代这些链接时，它会从页面中找到所有的链接，并且有这样的链接，但是我希望唯一的链接只意味着它们中没有任何重复

浏览 5提问于2014-06-22得票数 0

回答已采纳

2回答

PHP数组unset()行为-最后一个数组键是否保留？

、

$url1 = "http://localhost/work/project/scrapes/1.html";$url3 = ""; if(!filter_var($urls[$x], FILTER_VALIDATE_URL)){

浏览 2提问于2012-09-11得票数 0

回答已采纳

2回答

如何修复此代码，使其将PHP webcrawler的结果发布到MySQL表中？

、

=array(); if (parse_url($rel, PHP_URL_SCHEME) !="http"){ }} global $crawled_urls, $found_urls; if((array_key_exists($uen,$cra

浏览 0提问于2017-02-12得票数 1

1回答

使用简单的HTML Dom从多个页面收集web数据

、

我使用了以下代码，并成功地从特定页面收集了数据，如下所示： $html = file_get_html

浏览 0提问于2014-06-06得票数 1

3回答

在node.js中同步获取url？

是否有一种方法可以同步地从指定的url获取页面源？问题是，我有一个很长的urls列表(比如1000个urls)来获取和解析，在回调中在循环中这样做是非常痛苦的，因为它同时启动所有fetchUrl函数，并根据回调中的代码进行解析。我很希望能够：将结果解析

浏览 1提问于2014-04-02得票数 0

回答已采纳

3回答

url_to_absolute查询

是的，我正在构建一个网络爬虫，我的代码中有一段可以翻译成绝对urls，而不是/macbookpro/到。但是当我回显我的代码时，它只打印一个结果，这是它看到的第一个链接。url_to_absolute/url_to_absolute.php'); // grabs the urls<

浏览 0提问于2012-09-14得票数 0

1回答

外部Url获取图像

、、

我使用简单的html dom解析外部url并从中获取图像。我可以从80%的外部urls获取图像，但其中一些会出现问题。下面是一个例子。storeId=10153&catalogId=12605';foreach($html->find('img') as $element)

浏览 0提问于2011-12-29得票数 0

回答已采纳

4回答

php内容查找

、

我在试着从一个部门获取内容。="185" url="/90/177"> </select></div>$html = file_get_html($path); $con_div = $h

浏览 7提问于2014-09-25得票数 0

回答已采纳

点击加载更多