使用带有`--page-requisites`选项的wget时，不要创建目录

文章/答案/技术大牛

发布

1回答

wget

我正在使用带有<code>D1</code>选项的<code>D0</code>。我想把这个选项和<code>D2</code>结合起来。因此，例如，当调用<code>D3</code>时，它会将谷歌页面下载到<code>D4</code>目录，而不创建自己的文件夹(

浏览 6提问于2020-03-15得票数 0

2回答

为什么wget不下载包括视频？

wget

我使用 wget 下载包含所有资产的整个网站，问题是wget没有下载包含的视频。例如，使用，如果我执行以下命令：它下载几乎所有东西，但如果你打开网页我尝试了以下方案，但没有结果：但是，如

浏览 0提问于2015-04-17得票数 1

回答已采纳

2回答

有没有什么方法可以让我在cURL中获得这种行为？

http、bash、curl、download

我正在测试我的一个服务器实现，想知道我是否可以让curl获得嵌入的内容？我的意思是，当浏览器加载一个页面时，它也会下载所有相关的内容...有人能告诉我如何使用curl来做这件事吗？我不介意它甚至将二进制数据转储到终端上...我正在尝试对我的服务器进行基准测试(保持它最初的简单性，以测试bug……可能在这之后，我会使用像ab)这样的专用工具。

浏览 0提问于2010-02-04得票数 1

回答已采纳

3回答

使wget覆盖一个已经存在的文件，并且每次都下载它，而不管它在远程服务器上是否被更改。

wget

当我做两次wget时，它不会覆盖文件，而是将一个.1附加到名称中。...$ wget https://cdn.sstatic.net/askubuntu/img/logo.pngSaving to: ‘logo.png.1’如果alread

浏览 7提问于2020-07-29得票数 3

1回答

通过终端保存网页

terminal、firefox、chrome、browser

是否有任何方法可以使用常用的web浏览器(如firefox )来使用命令行接口获取页面？如果我使用firefox www.google.com，那么火狐将被打开并显示谷歌页面。

浏览 0提问于2019-07-04得票数 2

1回答

在Silex中使用wget命令？

exec、silex

我一直在尝试将exec与Silex一起使用，但我的命令无法执行。实际上，我需要检索整个网站连同它的css，js和图像，并将其存储在我的服务器中的一个目录中。exec("wget \ --no-clobber \ --no-par

浏览 1提问于2015-12-09得票数 0

2回答

从基于piwigo的web图库下载大量图像

14.04、command-line、scripts、downloads、websites

我希望从这个网站下载原始大小的图片，建立在piwigo http://mermaid.pink/之上。单一图像下载是允许的，但这将需要很长时间。是否有应用程序、扩展、脚本或其他任何能够执行此任务的内容？

浏览 0提问于2015-02-22得票数 2

回答已采纳

2回答

wget仅在每个文件夹中下载index.html

wget

例如：没有警告，没有错误；什么可能是错的？更复杂的是，我使用了推荐的命令(参见下面的命令)，输出并不令人满意(目前为止)：树目录也没有下载。 Check after 4 years and now works

浏览 0提问于2019-07-03得票数 2

1回答

wget只从站点下载某些文件夹

wget

我想用wget下载本站，为此我使用以下命令：这对我来说没问题，但链接的PDF文件位于我的URL示例的同一级别的文件夹中： http://www.s-manuals.c

浏览 0提问于2018-01-18得票数 0

回答已采纳

3回答

如何让WGET下载与浏览器完全相同的web页面html

wget

使用浏览器(IE或Chrome)，我可以用Ctl保存网页(.html)，使用任何文本编辑器检查它，并以表格格式查看数据。其中一个数字是我想要提取的，但对于很多，很多网页，太多的手工操作。因此，我想使用WGET一个接一个地获取这些网页，并编写另一个程序来解析.html并检索我想要的数字。但是WGET在使用与浏览器相同的URL时保存的.html文件不包含数据表。为什么不行？就好像服务器

浏览 0提问于2014-01-27得票数 47

3回答

我想下载带有的wget的所有页面(带有嵌套链接)。我尝试了以下命令： wget --reject php,xml --exclude-domains https://motamem.org/wp-content/plugins/ProProfile/ajaxAppleWebKit/537.36 (KHTML, like Gecko) Chrome/61.0.3163.79 Safari/537.36" -m

浏览 1提问于2021-01-06得票数 0

3回答

如何创建网站的脱机副本？

download-manager、offline、archiving

在90年代，我使用的是远程端口专业版。一种选择是使用npm模块(如request或cheerio )编写一个简单的npm应用程序，但我不想重新发明轮子。(因此问) 我主要是在Mac上，如果软件值得的话，我可以使用Windows。

浏览 0提问于2014-06-27得票数 8

1回答

使用wget递归下载网站时排除包含特定字符串的网页

wget

我试图递归地抓取一个网站，但我想排除该域下的一些网页，其中包含字符串“不必要的页面”。该字符串不在URL中。以下是用于构建的原始命令：例如，我想抓取维基百科。但我想排除包含关键字“药物”的文章。有什么想法吗？

浏览 8提问于2014-06-23得票数 0

3回答

用php将url的内容保存到本地，包括图片

php、linux、curl

我需要一些方法来复制和保存一个网站“脱机使用”使用php或linux命令行。就像用浏览器保存链接一样，它重写图像标签并下载它们。所以我在想的是创建一个工具，在我的服务器上为我保存页面，并使用这个url。我知道如何使用file_get_contents获得文本/html，这在大多数情

浏览 2提问于2012-12-17得票数 0

8回答

为什么wget只下载一些网站的index.html？

wget

我正在尝试使用wget命令：来获取主页上的所有文件。对于一些网站，它可以工作，但在大多数情况下，它只下载index.html。我尝试了wget -r命令，但它不起作用。有谁知道如何获取一个页面上的所有文件，或者只是给我一个文件列表和页面上相应的urls？

浏览 94提问于2012-06-21得票数 58

1回答

使用wget制作带有图像重定向的站点静态副本

ruby-on-rails-5、wget、rails-activestorage、ruby-on-rails-6

我想使用wget创建一个动态站点的静态副本。图像击中控制器，然后重定向到它们的真实(到期) URL。我很难找到wget的工作命令行选项。我试过了--page-requisites --convert-links --max-redirect=10 \ http://activestorage-test.herokuapp.com但是图像路径没有得到正确的处理。这是

浏览 3提问于2019-12-22得票数 2

回答已采纳

4回答

wget和漂亮的urls

wget

我使用wget，因为它可能是可用的最易于编程的工具，使用-r标志触发链接跟随。wget，hovewer不处理漂亮的urls，即http://webpage/index.php/my/pretty/link，将它们作为子目录处理。这个问题有解决办法吗？我所做的很简单:我使用了服务器的url重写特性，并将url从http:/

浏览 0提问于2009-06-26得票数 6

3回答

从exec()或shell_exec()调用wget时无法工作

php、exec、wget、shell-exec

我正在尝试将我编写的wget命令集成到php脚本中。该命令递归地在网站上下载每个html/php文件(这是我在file_get_contents()中没有找到的所需功能)。我已经在终端窗口中测试了wget命令，但是在使用exec()或shell_exec()执行它时什么都没有发生。我没有收到任何错误或警告。这是有问题的命令 wget --recursive -m --domains oooff.com --page-requisite

浏览 3提问于2016-05-08得票数 3

回答已采纳

1回答

如何在python中使用wget下载网页(mhtml格式)

python、python-3.x、selenium、ipython、wget

我们如何使用Python语言中的wget保存包含内容的网页，以便它可以脱机查看？目前我使用的代码如下：driver.get("http://www.yahoo.com") wget.download("http://www.yahoo.com", C:\\Users\\karanjuneja\\

浏览 1提问于2017-03-23得票数 0

2回答

命令行，相当于使用右击保存网页保存网站。

linux、command-line

在centos上的mozilla firefox上，如果我右键单击某个网站，我可以通过单击菜单中的“另存页为”来保存网页：是否有一种方法也可以使用命令行进行此操作？我注意到，当我从浏览器中保存网站时，我在输出文件中得到的细节比只做curl和wget更多。如何通过命令行界面(如wget和curl )获得这些额外的细节，包括指向网站上某些文件的链接？

浏览 0提问于2020-12-20得票数 0

点击加载更多