1回答
如何让我的卷发在抓取之前等待几秒钟？
php、curl、web-scraping
所以我试着从一个网站上抓取一些数据。有一系列的名字需要抓取。发生的情况是，如果有15个名字需要抓取。其中只有5个名字被刮掉了。 $post = curl_init();
curl_setopt($post, CUR
浏览 0提问于2013-04-16得票数 3
1回答
无法抓取Zazzle产品url
php、curl、web-scraping
下面是我的代码，我试图抓取下面的URL，但由于某些原因，html源代码根本没有被抓取。为什么在此URL上没有发生抓取？http://www.zazzle.com/protoceratops_t_shirt-235065458404753105
$ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url);
c
浏览 1提问于2016-12-13得票数 0
1回答
内部simple_html_dom访问ul
php、simple-html-dom
我使用simple_html_dom作为html类抓取脚本，当我试图在div中抓取ul时遇到了一个问题
<div class="headline= curl_init(); curl_setopt($curl, CURLOPT_HEADER,
浏览 1提问于2017-03-14得票数 0
回答已采纳
3回答
我曾经听说使用Curl可以做到这一点，但是我不想在我的站点上显示来自外部站点的所有内容，而只想显示来自特定div的内容。如何做到这一点？
浏览 3提问于2010-04-29得票数 4
1回答
所以，如果你看过我的上一篇文章，我上传了一个400MB的文件，最终导致我的虚拟机失去了所有的内存(准确地说是2000MB内存)，因为它是通过cURL将文件从一个服务器上传到另一个服务器，因为我认为file_put_contents
浏览 8提问于2016-05-13得票数 0
1回答
Apache服务器中未定义File_get_contents错误。
php、json、apache
我写了一个简单的脚本来获取页面的内容。当我在Apache服务器上运行它时，我会得到一个错误：
$url = "http://steamcommunity.com/market/priceoverview/?appid=730&country=PL¤cy=3&market_hash_name=Desert%20Eagle%20%7C%20Blaze%20(Minimal%20Wear)";
$json = file_get_contents(
浏览 5提问于2015-04-07得票数 0
回答已采纳
3回答
抓取、缓存和解析远程XML提要，在PHP中进行验证检查
php、xml、curl、xml-validation
目前，我正在抓取一个远程站点的XML提要，并在服务器上保存一个本地副本，以便用PHP进行解析。如果出现错误而无效(有时远程XML feed显示空白feed.xml)，是否提供以前抓取/保存的feed.xml的备份有效副本？<?php* Initialize the cURL session$ch = curl_init();* Set the URL of the page or file to$fp =
浏览 0提问于2010-02-15得票数 5
回答已采纳
1回答
如何在android中压缩pdf页面
android、pdf、page-curl
我搜索更多，但没有得到适当的代码实现在我的项目，我想卷曲每页的PDF文件，就像普通的书，但无法做到，在我的代码时，我点击按钮PDF文件加载从sdCard。if (file.exists()) {Intent intent = new Intent(Intent.ACTION_VIEW);intent.setFla
浏览 2提问于2015-03-04得票数 1
回答已采纳
2回答
简化代码以加快php抓取器速度
php、screen-scraping、file-get-contents
代码简单地插入一个页面，从指定的表中获取所有表内容，将其插入到我的数据库中，并回显它。<?php$pagenumber = 1001;
获取内容$raw = file_get_contents($url);
$newlines = array("\t","\n","\r",&#
浏览 0提问于2011-10-10得票数 0
回答已采纳
4回答
如何使用cURL获取文本
php、curl、fetch
我正在尝试使用cURL从另一个URL获取/获取文本。我抓取文本的位置在一个带有动态(而非静态)数据的空白HTML文档中，因此没有需要筛选的HTML标记。$_POST['username']);curl_setopt(CURLOPT_FRESH_CONNECT, true);
die(
浏览 4提问于2010-06-25得票数 1
1回答
用CURL PHP获取文件内容？
php、file、curl
内容不会从文件中加载，这是我的curl代码，// GET CONTENTS OF HASHES.TXT// SUCCESSFULY OPENED HASHES.TXT
$file = <em
浏览 0提问于2012-05-23得票数 1
3回答
在php中抓取大量页面的最快方法是什么？
php、curl、screen-scraping、web-scraping、curl-multi
我有一个数据聚合器，它依赖于抓取几个网站，并以一种用户可搜索的方式索引他们的信息。我每天都需要能够抓取大量的页面，我在使用简单的curl请求时遇到了问题，当长时间快速执行时，curl请求相当慢(刮板程序基本上是全天候运行的)。在一个简单的while循环中运行一个多curl请求相当慢。我通过在后台进程中执行单独的curl请求来加快速度，这样做的速度更快，但迟早会有较慢的请求开始堆积，最终导致服务器崩溃。有没有更有效的抓取数据的方法？也许是命令行curl？
浏览 0提问于2010-05-20得票数 2
11回答
CURL和HTTPS，“无法解析主机”
php、curl
我正在尝试使用CURL获取页面的内容。执行抓取的页面是https，它试图抓取的页面也是https。我得到一个错误“无法解析主机”与我尝试的所有设置。$c=curl_init();//curl_setopt($c, CURLOPT_USERAGENT, "Mozilla/5.0, TRUE);
//curl_setopt($c, CURLOP
浏览 0提问于2009-08-27得票数 47
回答已采纳
1回答
Curl重定向:为什么FOLLOWLOCATION不遵循右域名
php、curl
我正在尝试抓取一个网站，但我试图抓取的页面包含重定向到另一个页面。我将FOLLOWLOCATION参数放在curl上，但我到达的是url、等等<?php$ch = curl_init();
curl_
浏览 1提问于2010-09-05得票数 0
1回答
带有代理的cURL不起作用
php、curl、proxy
我想通过代理使用cURL来抓取cURL。 curl_setopt($curl_init, CURLOPT_PROXY, $proxy);
浏览 9提问于2016-03-04得票数 0
1回答
使用curl (循环)从页面抓取所有图像curl
php、regex、loops、curl
我已经创建了一个简单的脚本来从页面上抓取图像URL。脚本做到了这一点，但只抓取了第一个URL，如何循环这一点的一些方向将不胜感激。 $memberID = $_GET["memberIDsubmit"];
$curl= curl_init("http://domain.com/profile/?Id=$memberID&
浏览 2提问于2015-02-15得票数 0
3回答
当URL具有产品id而不是真值时，抓取网站中的信息
php、linux、web-scraping
我猜是它的php，但是最好的方法是做一个循环，从一个使用id的网页中抓取cURL信息，比如(?ProductId=103)大约有1200个页面。我需要找到每页上第9个跨度的innerHTML。此信息将只存储在一个mySQL表(id->值)中，以备将来对此站点进行抓取。
浏览 2提问于2011-01-28得票数 1
回答已采纳
1回答
php dom xpath从站点中的所有文件夹中提取所有链接
php、dom、curl
也许它叫别的什么..我有下面的代码，它将抓取第一个文件夹中的所有内容，但不会从其他文件夹中抓取其他项目。例如，它会抓取第一个/前面的所有内容，但如果你有一个站点mysite.com/ folder2 /，它就不会抓取folder2。一切都是联系在一起的。它也会向后移动。request to $target_web
浏览 0提问于2013-02-19得票数 0
1回答
cURL抓取函数
php
你能用你对cURL的了解给我一些启发吗？我尝试过cURL，但是函数的输出是它复制了整个站点。我计划只收集该网站的所有搜索结果。
我如何才能做到这一点？
浏览 0提问于2011-05-03得票数 1
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号