WGET -从第三方网站下载特定文件(通过扩展或mime类型)

文章/答案/技术大牛

发布

1回答

bash、shell、terminal、wget

我需要使用wget从网站获取所有的".js“扩展文件，包括第三方的扩展文件，但并不总是这样做。我使用下面的代码： wget -H -p -A "*.js" -e robots=off --no-check-certificate https://www.quantcast.com 例如，如果我执行wget to "https://www.

浏览 24提问于2020-04-29得票数 0

2回答

可以使用Wget指定要下载的文件内容类型吗？

linux、web-crawler、wget

我想使用wget下载从网站主页链接的文件，但我只想下载text/html文件。是否可以将wget限制为基于mime内容类型的text/html文件？

浏览 1提问于2011-07-17得票数 5

回答已采纳

1回答

在IIS上mime类型和扩展筛选之间的区别？

iis、iis-7

文件扩展名错误404。我确实允许它在扩展过滤器中它没有解决，而在mime类型下，它就可以了。那么，添加文件扩展名的目的是什么呢？

浏览 0提问于2011-06-16得票数 1

回答已采纳

3回答

html直接链接下载不能使用不同的文件编码

html、download、hyperlink、href

我正在编辑另一个开发人员创建的网站。尝试以不同的方式下载一些文件，我注意到了这一点：1)将文件重命名为"a.exe"，如果我浏览到"www.mysite.com/a.exe“开始文件下载。3)将文件重命名为"a.txt"，如果我浏览到"www.mysite.com/a.txt“开始文件<e

浏览 3提问于2013-07-19得票数 1

回答已采纳

2回答

无法在IIS6中提供epub文件

iis、iis-6、http-status-code-404

我试图在epub (Windows 2003)中提供IIS6文件，但浏览器提供的是404 Not Found页面。📷📷📷返回到MIME<e

浏览 0提问于2012-07-31得票数 1

回答已采纳

1回答

无人值守的wget安全问题

bash、cron、wget

我编写了一个简单的脚本，使用wget从一个网站收集特定的文件类型(.png)。虽然这很好，但我还是有点担心可能的安全风险。目前，wget只需下载所有带有.png扩展名的内容，理论上该网站就有可能包含已重命名的恶意文件或垃圾文件。有办法在wget下载之前进行一些过滤吗？我要下载的文件总是共享一些可以用来识别它们

浏览 0提问于2014-07-05得票数 0

回答已采纳

1回答

我如何下载一个非公开的Google站点？

cookies、oauth、wget、google-sites-2016

我想下载一个谷歌网站的所有网页的HTML，只能通过登录到谷歌访问。谷歌没有为新的谷歌网站()提供API。让事情变得更复杂的是，我的谷歌登录要求使用。我尝试在火狐中进行身份验证，通过火狐扩展保存我的cookie，然后使用wget： --load-cookies=cookies.txt \ --no-host-directories我还尝试了在火狐内部通过，它可以生成一个wget命令，等同于

浏览 5提问于2020-05-29得票数 0

3回答

下载网站上的文件

wget

我的目标是只下载在网站上可用的文件，如那些在http://pelusa.fis.cinvestav.mx/tmatos/LaSumA/LaSumA2_档案/NumeRCPs/ansi/index.htm下的“通过目录访问：”标题。我如何实现我的目标，我不熟悉wget和我不想获得html文件，我想只下载*.c和*.h文件的网站，例如。有可能吗？我认为

浏览 0提问于2014-04-14得票数 1

回答已采纳

1回答

什么“选项”与"WGET“一起使用，以便从FTP目录中只选择几个具有特定扩展名的文件

file、ftp、wget

我正在尝试通过FTP服务器从文件夹中下载带有特定日期戳的文件作为扩展名。由于该文件夹包含所有其他文件，因此我只想下载带有特定日期戳的文件。我试着使用wget files_datestamp*.extension，但不起作用。我也尝试过使用wget -i files_datestamp*.extension，它可以下载所有的<em

浏览 19提问于2019-05-02得票数 0

1回答

我正在编写一个需要识别我的定制mime类型的应用程序，这样当从服务器下载这样的文件时，我的应用程序就会被启动。我阅读了布拉德关于如何在iOS at 下编写mime类型识别器的伟大文章，而且只有当文件的扩展名也在我的plist的UTExportedTypeDeclarations / UTTypeTagSpecification部分中指定并且服务器提供具有相同扩展名的文件时，它才能正常工作。

浏览 6提问于2012-05-14得票数 3

1回答

在asp.net中设置MIME类型

asp.net

我有一个网站，在Chrome检查器中，我得到了这个：谢谢。

浏览 0提问于2011-09-22得票数 6

回答已采纳

1回答

Astro文件管理器如何允许在浏览器应用程序中下载任何文件？

android、download

我正在写一个应用程序，利用一些自定义文件类型的使用。我希望用户能够从某个网站下载这些自定义文件类型。默认情况下，内置的安卓浏览器应用程序不允许下载未知类型的文件，但等文件管理器允许在浏览器应用程序中下载任何类型的文件。此外，我意识到Android并不真正关心文件扩展名，只关心MIME类

浏览 1提问于2011-11-01得票数 0

4回答

允许在Visual Studio Express 2013 for Web中加载JSON文件

iis、visual-studio-2013

默认情况下，静态文件处理程序处理所有内容。您尝试使用的功能可能未安装。没有为网站或应用程序启用适当的MIME映射。验证是否启用了MIME映射，或使用命令行工具appcmd.exe添加网站的MIME映射。配置文件(如.CONFIG )或动态脚本页(如.ASP或.ASPX )不应直接下载，而应始终通过处理程序进行处理。其他文件(如数据库文件<

浏览 52提问于2013-10-22得票数 55

回答已采纳

1回答

wget不返回与在chrome浏览器中单击链接相同的结果

wget

我试图使用wget从一个链接(没有文件扩展名)下载一个音频文件。问题是，单击此链接会自动启动.wav文件下载，但同一链接上的wget将返回一个没有文件扩展名的文件。传递-O file.wav扩展名不起作用，因为文件本身不兼容。wget -O test.wav "[DOWNLOAD LINK]" 上面的文件<

浏览 9提问于2022-08-19得票数 -1

5回答

下载包含所有可下载内容的wget* (或其他)整个网站*

downloads、wget

我想下载winamp的网站以防他们关闭。我需要下载所有的东西。我试过一次用wget下载网站本身，但是当我尝试从它下载任何文件时，都会给出一个没有扩展名或名称的文件。我怎么才能解决呢？

浏览 0提问于2013-12-16得票数 45

回答已采纳

1回答

处理.JS文件的简单请求时挂起的Tomcat响应

tomcat、encoding、tomcat7、mime-types、mime

我的Tomcat 7服务器上有一个JavaScript文件。如果我将文件扩展名重命名为不同的MIME类型，它就可以工作并下载(例如重命名为test.blah)。中用于"js“

浏览 1提问于2014-03-24得票数 0

2回答

下载IIS和IISExpress中的CER文件，以及ISAPI模块

asp.net、download、certificate、iis-7.5、iis-express

我有下载证书根CA (.CER文件)的aspx页面。我尝试下载CER文件(使用IE和Chrome)，单击aspx页面中的链接：但我也犯了同样的错误。ISAPI过滤器采用了MIME

浏览 2提问于2016-07-04得票数 1

4回答

wget -如何递归下载并且只下载特定的mime类型/扩展(即仅文本)

wget、recursive、download、mime-types

如何下载完整的网站，但忽略所有二进制文件。 wget有使用-r标志的这个功能，但是它下载所有的东西，有些网站对于低资源的机器来说太多了，而且由于我下载该站点的特定原因，它没有用处。下面是我使用的命令行：wget -P 20 -r -l 0 http://www.omardo.com/blog (我自己的博客)

浏览 0提问于2012-10-31得票数 27

回答已采纳

0回答

我尝试用wget下载特定类型的文件时搞砸了什么？

wget

我正在尝试定期归档一些托管在社区网站上的文件类型，其中我们的管理员已经MIA多年，以防他死亡或只是停止支付托管费用。我可以使用wget -r -np -nd -e robots=off -l 0 URL下载我需要的所有文件，但这给我留下了大约60,000个额外的文件来浪费下载和删除的时间。我实际上只寻找扩展名为"tbt“和"zip”的文件。当我在输入中添加-A tbt,zip时，

浏览 4提问于2017-12-06得票数 2

1回答

下载的.pptx文件使用错误的mime类型作为IIS中的.potx

iis、mime-types

因此，当从windows iis7.5上的网站下载.pptx文件时，它会在InternetExplorer中将其下载为.potx。它以某种方式改变了它的mime类型。我在IIS中检查了该网站上的mime类型，它们是正确的：对于potx :application/vnd.openxmlformats-officedocument.presentationml.template它发生在所有浏览器上，只在chr

浏览 8提问于2013-11-26得票数 1

点击加载更多