如何下载整个pypi Python包索引
下载整个 PyPI (Python Package Index) 是一项非常大的任务，因为 PyPI 包含了数十万个 Python 包，总大小可能超过数TB。这可能需要大量的存储空间和网络带宽。此外，由于 PyPI 的数据是动态更新的，所以下载的数据可能很快就会过时。
如果你仍然想要下载整个 PyPI，你可以使用 bandersnatch 这个工具。bandersnatch 是一个 PyPI 镜像工具，可以用来创建 PyPI 的本地镜像。
以下是使用 bandersnatch 的基本步骤：
- 首先，你需要安装
bandersnatch。你可以使用 pip 来安装： pip install bandersnatch - 然后，你需要创建一个
bandersnatch的配置文件。你可以使用以下命令来创建一个默认的配置文件： bandersnatch mirror 这将会在你的用户目录下创建一个名为bandersnatch.conf的文件。 - 最后，你可以运行以下命令来开始镜像过程： bandersnatch mirror 这将会开始下载整个 PyPI。请注意，这可能需要很长时间，并且需要大量的磁盘空间。
相关·内容
我正在尝试找到一种方法来下载整个PyPi索引-并且只下载索引-没有代码文件。我想要分析许可证类型，以便能够排除许可证类型限制过多的库。
浏览 12提问于2016-09-17得票数 4
回答已采纳
我有一台服务器，我想在上面使用Python，它在公司的防火墙后面。我不想弄乱它，我唯一能做的就是为特定的URL/域创建一个防火墙例外。
我还想使用pip或easy_install访问位于pip上的包。因此，您是否知道在防火墙的例外规则中，除了*.pypi.python.org之外，我应该要求列出哪个URL？
浏览 0提问于2013-01-11得票数 28
回答已采纳
$ sudo easy_install ReviewBoard搜索ReviewBoard阅读//pypi.python.org/simple/ReviewBoard/上的下载错误:超时--可能找不到某些包！找不到“ReviewBo
浏览 7提问于2014-07-23得票数 2
1回答
我正在bitbucket中开发一个python包，并希望在pypi中对其进行索引。每当我有一个新的下载时，我所做的操作似乎是相当低效的，这就触发了这个问题。我已经将一个新的包上传到pypi中(3)在我完成(
浏览 7提问于2012-04-28得票数 3
回答已采纳
1回答
我需要安装python3，pip，django和其他一些python模块到目前为止还无法访问互联网。然而，我将被允许访问少数几个真正需要的网址数天。我需要为那些URL提出防火墙请求。
浏览 5提问于2017-05-15得票数 0
回答已采纳
2回答
我需要使用pip下载Biopython包。我运行了pip install biopython，但得到了以下错误：我验证了这个问题是因为网络阻塞了大多数站点，因为它试图安装其他包(通过pip和其他方式)并得到一个网络连接错误。要允许这些下载，我需要编译下载来源的urls列表，并将其发送给网络管理员以解除阻止。根据pip文档(在pip Wikipedia文章中引用并简要解释)，“很多包都可以在默认的包及其依赖源中找到-- Python包
浏览 4提问于2018-04-03得票数 12
我下载了一个Python包并将其解压缩。我是在一个封闭的局域网工作，所以很明显，通常的全局PyPI索引是不可用的。我们在网络中有自己的PyPI索引。我知道如何在使用pip或easy_install时链接到它。但是，在直接运行setup.py install时，我无法找到如何做到这一点。
这是如何做到的呢？
浏览 4提问于2016-01-03得票数 2
回答已采纳
它现在在test.pypi上，当我想要安装它时，它会产生一个无法找到依赖项的错误。
浏览 1提问于2020-03-26得票数 4
回答已采纳
1回答
我们在这里使用Buildout作为构建包的一种方式，当我们试图通过运行bin/buildout来下载鸡蛋时，总是会遇到非常令人沮丧的超时 Installing python_section.
Getting distribution for 'python-d
浏览 0提问于2013-07-05得票数 0
回答已采纳
5回答
是否有可能获得按受欢迎程度(总下载次数)排序的PyPI包列表？
我无法找到在PyPI上这样做的方法。也许PyPI为此提供了一个数据库转储？如果我找不到更简单的方法，我计划使用他们的JSON来刮PyPI。
浏览 20提问于2015-06-24得票数 30
回答已采纳
由于某些原因，我无法理解，pip是从全球的pypi获得一个包，而不是从我自己的服务器。我的包，让我们称之为foo，有一个依赖项bar。pip install --index-url https://example.com/simple foopip install --index-url https://example.com/simple --extra-index-url htt
浏览 2提问于2018-12-12得票数 0
回答已采纳
Python3 Pip错误+诗歌包装
authors = ["<myname> <myemail>"]
license = "MIT
浏览 38提问于2022-07-08得票数 0
回答已采纳
然而，在我的日志中，我发现pip第一次尝试在本地检查之前在pypi上找到6个。相反，我想强迫安装程序永远不要检查pypi。日志输出(这是在我下载六个tarball之前，所以请忽略本地包错误)
django的处理依赖关系-扩展==1.2.5读取
下载错误: Errno
浏览 1提问于2014-02-05得票数 2
回答已采纳
2回答
我使用pip在本地和venv上安装软件包。最近，为了实现私有的pypi解决方案，我修改了pip.config，遇到了一个问题。我们正在创建一个名为foo的包，并使用twine将其上传到托管在Azure DevOps工件下的私有pypi服务器。下载软件包时，使用以下pip.conf:在本地计算机上安装pip时一切正常index-url=https://pypi.python.org/simple
extr
浏览 4提问于2021-03-24得票数 0
回答已采纳
1回答
我正在尝试通过pip install安装python依赖项。出于安全原因，我的环境不能访问python默认包索引( )。但我有自己的pypi服务器。最大的问题是，即使在我的pypi服务器上设置了pip install的-i标志，pip install仍然在python默认包索引中查找包。当发生这种情况时，pip install无法到达python默认包索引，并发
浏览 1提问于2015-06-08得票数 3
我正在使用自动下载和设置我的Plone安装的许多依赖项。buildout或多或少使用easy_install来下载和安装一堆Python鸡蛋。这通常是有效的，但如果有任何依赖项无法下载，或者如果我想让buildout找到一个不适合pypi的内部包，它就不起作用。如何设置我自己的本地版本的pypi来自动镜像我需要的包？对于那些使用pypi作为元数据而不是代码的包，它还会依赖于第三方服务器吗？
浏览 1提问于2009-02-17得票数 14
回答已采纳
2回答
我正在构建的一个docker映像通过pip拉出了很多python包。RUN pip install -r lots-of-packages.txtRUN pip install --index-url http://localhost:3141/root/p
浏览 0提问于2017-09-13得票数 0
1回答
在我工作的python项目中，我们使用标准的需求文件安装了来自PyPI的一些包，以及来自Gemfury的一些私人公司的包。--index-url <OUR_GEMFURY_URL>simplejson==3.17.1
&l
浏览 3提问于2021-02-17得票数 4
我想用pip安装一个特定的python包，但是因为代理的原因，我坐在pip后面，无法连接到互联网。
所以我的问题是: pip在哪里寻找.whl文件以便下载它们？难道我不能用我的浏览器(它可以很好地连接到互联网)来下载.whl文件吗？应该不是问题。
浏览 3提问于2018-01-19得票数 11
回答已采纳
我正在开发一个python库，它依赖于来自PyPI的包PyPI和来自另一个索引的B。如果B已经在PyPI中列出了，那么如何指定依赖项呢？
浏览 1提问于2019-09-16得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
