如何在filter-branch --subdirectory-filter之后从我的repo中删除不需要的对象

在使用 filter-branch --subdirectory-filter 命令后，如果需要从仓库中删除不需要的对象，可以使用以下步骤：

首先，执行以下命令以获取需要删除的对象列表：

git log --all --format="%H" | grep -v $(git log --format="%H" --branches --tags)

将需要删除的对象列表保存到一个文件中，例如 objects-to-delete.txt。
使用以下命令删除不需要的对象：

git filter-repo --subdirectory-filter <path-to-subdirectory> --invert-paths --pathspec-from-file=objects-to-delete.txt

其中，<path-to-subdirectory> 是需要保留的子目录的路径。

最后，使用以下命令删除不需要的分支和标签：

git for-each-ref --format="%(refname)" refs/original/ | xargs -n 1 git update-ref -d

这将删除所有原始分支和标签。

需要注意的是，这些命令可能会导致仓库历史记录的丢失，因此在执行前请确保备份所有需要保留的数据。

相关·内容

几个你不知道的Git小命令,却收获快乐。

，你不需要再次重复提交消息。...两个工程（一个源文件工程，一个打包后的工程）放到同一个仓库(repo)中。...带有--single-branch --branch标志的git clone允许你从存储库中clone特定分支，毫不夸张的说，这个命令我在 Google 中搜索了10多次。...git fresh git config --global alias.fresh "filter-branch --prune-empty --subdirectory-filter" # Example...带有多个参数的 filter-branch获取指定子文件夹的内容，并将其中的内容替换为该子文件夹的内容。

6891 0

几个不常见却很实用的Git小命令，却收获快乐

，你不需要再次重复提交消息。...我使用git here一步就完成了（这对于开源工具重度爱好者，真的是福星，太爽了，谁用谁知道）。只需在要创建新仓库的文件夹中运行它，就可以了。...两个工程（一个源文件工程，一个打包后的工程）放到同一个仓库(repo)中。...带有--single-branch --branch标志的git clone允许你从存储库中clone特定分支，毫不夸张的说，这个命令我在 Google 中搜索了10多次。...git fresh git config --global alias.fresh "filter-branch --prune-empty --subdirectory-filter" # Example

6712 0

从仓库中移除敏感信息

如果你将敏感数据（如密码或 SSH 密钥）提交到 Git 仓库，你能够将其从历史记录中删除。...要从仓库的历史记录中完全删除不需要的文件，你可以使用 git filter-branch命令或 BFG Repo-Cleaner。...我们建议在从仓库中删除文件之前合并或关闭所有打开的请求。你可以使用 git rm 从最新的提交中删除文件。...从仓库历史中清除文件使用 BFG BFG Repo-Cleaner 和 git filter-branch 类似，用于删除不需要的文件，是一种更快速、更简单的替代方法。...为了说明 git filter-branch 如何工作，我们将向你展示如何从仓库的历史记录中删除具有敏感数据的文件，并将其添加到 .gitignore 中以确保它不会被意外重新提交。 1.

9472 0

Git 基础命令

之后的所有变动，每个 commit 占据一行 $ git log [tag] HEAD --pretty=format:%s #显示某个 commit 之后的所有变动，其“提交说明”必须符合条件 $ git...stash apply stash@{1} 核武器级选项 filter-branch # 从每一个提交移除一个文件：指 git add ....$ git filter-branch --tree-filter 'rm -f passwords.txt' HEAD # 使一个子目录作为新的根目录：假设已经从另一个源代码控制系统中导入，并且有几个没意义的子目录...$ git filter-branch --subdirectory-filter trunk HEAD # 在开始工作时忘记运行 git config 来设置你的名字与邮箱地址，或者你想要开源一个项目...任何情形下，你也可以通过 filter-branch 来一次性修改多个提交中的邮箱地址。

4753 0

Github技巧 – 删除敏感文件、批量修改提交

最近终于是快忙完面向对象课设，前前后后写了2w+行，也勉强算个完整项目了。不过由于项目原先部署在私有Gogs，后来又移到Github私有仓库，导致我没有在意配置文件。...最近打算整理整理开源的时候发现，近100 commits里全是我那配置文件。其实以前我也干过这事，当时是biliapi-python的开源，在测试用例中包含了账号信息。...当时一顿骚操作，然后成功的把所有commit弄没了。这次学乖了，跑去看了眼文档，发现一个非常好用的指令git filter-branch。...比如删除passwords.txt文件，可以运行： $ git filter-branch --tree-filter 'rm -f passwords.txt' HEAD Rewrite 6b9b3cf04e7c5686a9cb838c3f36a8cb6a0fc2bd...首先单独clone下repo，之后cd进来git filter-branch。之后检查git log会发现hash和日期都变了，虽然hash没办法，不过日期的问题不用担心，push后是正确的。

8091 0

Git目录为什么这么大

HEAD：表示当前本地签出的分支 hooks：git钩子目录，关于钩子的使用可以参考我之前的文章利用Git钩子实现代码发布 index：存储缓冲区GitExtensions中的stage...的内容 objects：存储对象的目录，git中对象分为commit对象，tree对象(多叉树)，blob对象 refs：存储指向branch的最近一次commit对象的指针，也就是commit...于是在Git中删除一个文件时，Git只是记录了该删除操作，该记录作为一个Patch存储在 .git 中。...我们在提交前移除了 test.py 文件，这个文件便从Git的所有记录中完全消失了 3、解析Object存储方式为了一步步熟悉Object存储的方式，这里在本地创建一个空的git仓库，且objects...，commit对象中保存了commit的作者，commit的描述信息，签名信息以及该commit中包含哪些tree对象和blob对象，继续看该tree对象中的内容 # git cat-file -p d2df53

1.3K1 0

Git修改已提交的commit1 本地修改

请往下继续阅读 1.3 重排或删除某些提交变基命令非常强大，还可以将提交历史重新手动排序或者删除某次提交。...1.5 分离某次提交变基命令还能分离提交，这里不描述，详情查看后面的参考链接终极手段 git还提供了修改版本历史的“大杀器”——filter-branch，可以对整个版本历史中的每次提交进行修改，可用于删除误操作提交的密码等敏感信息...删除所有提交中的某个文件 git filter-branch --treefilter 'rm -f password.txt' HEAD 将新建的主目录作为所有提交的根目录 git filter-branch...--subdirectory-filter trunk HEAD 本地回退回退操作也是对过往提交的一剂“后悔药”，常用的回退方式有三种：checkout、reset和revert checkout...回退到的指定提交以后的提交都会从提交日志上消失注意：工作区和暂存区的内容都会被重置到指定提交的时候，如果不加--hard则只移动HEAD的指针，不影响工作区和暂存区的内容。

2.1K3 0

防止 Git 泄漏的 5 种最佳做法

这些做法导致 Git 仓库中的信息遭到泄露。每天都有数千个新的 API 或加密密钥从 GitHub 泄漏出去。[2] 我在信息安全领域工作了三年。...gitleaks[8] 提供了另一种在 git 仓库中查找未加密的密钥和其他一些不需要的数据类型的方法。我们可以将其集成到自动化工作流程中，例如 CICD。...我们需要做的是从整个 Git 历史记录中删除所有敏感数据。在进行任何清理之前请记得进行备份，然后在确认一切正常后再删除备份文件。...git clone --mirror git://example.com/need-clean-repo.git 我们需要执行 git filter-branch 命令来从所有分支中删除数据并提交历史记录...通常比 git filter-branch 快 10–720 倍。除删除文件外，BFG 还可以用于替换文件中的机密信息。 BFG 保留最新的提交记录。它是用来防止我们犯错误的。

2K1 0

10.7 Git 内部原理 - 维护与数据恢复

它会从你必须修改或移除一个大文件引用最早的树对象开始重写每一次提交。...为了演示，我们将添加一个大文件到测试仓库中，并在下一次提交中删除它，现在我们需要找到它，并将它从仓库中永久删除。...branches -- git.tgz dadf725 oops - removed large tarball 7b30847 add git tarball 现在，你必须重写 7b30847 提交之后的所有提交来从...最后，使用 filter-branch 选项来重写自 7b30847 提交以来的历史，也就是这个问题产生的地方。否则，这个命令会从最旧的提交开始，这将会花费许多不必要的时间。...可以从 size 的值看出，这个大文件还在你的松散对象中，并没有消失；但是它不会在推送或接下来的克隆中出现，这才是最重要的。

8322 0

Git 维护及数据恢复

为了移除对一个大文件的引用，从最早包含该引用的 tree 对象开始之后的所有 commit 对象都会被重写。...为了演示这点，往 test 仓库中加入一个大文件，然后在下次提交时将它删除，接着找到并将这个文件从仓库中永久删除。...而在这次提交之前仅用了 2K 左右 ── 显然在这次提交时删除文件并没有真正将其从历史记录中删除。...不过 reflog 以及运行 filter-branch 时 Git 往 .git/refs/original 添加的一些 refs 中仍有对它的引用，因此需要将这些引用删除并对仓库进行 repack...从 size 值可以看出大文件对象还在松散对象中，其实并没有消失，不过这没有关系，重要的是在再进行推送或复制，这个对象不会再传送出去。

5782 0

Git GC命令清理Git暂存区

6.8K2 0

7.6 Git 工具 - 重写历史

核武器级选项：filter-branch 有另一个历史改写的选项，如果想要通过脚本的方式改写大量提交的话可以使用它 - 例如，全局修改你的邮箱地址或从每一个提交中移除一个文件。...你将会学习到几个常用的用途，这样就得到了它适合使用地方的想法。从每一个提交移除一个文件这经常发生。有人粗心地通过 git add . 提交了一个巨大的二进制文件，你想要从所有地方删除它。...为了从整个提交历史中移除一个叫做 passwords.txt 的文件，可以使用 --tree-filter 选项给 filter-branch： $ git filter-branch --tree-filter...在本例中，你从每一个快照中移除了一个叫作 passwords.txt 的文件，无论它是否存在。...如果想要让 trunk 子目录作为每一个提交的新的项目根目录，filter-branch 也可以帮助你那么做： $ git filter-branch --subdirectory-filter trunk

6836 0

如何删除Git仓库中的敏感文件及其历史记录

本文主要介绍如何使用 git filter-branch 命令删除 Git 仓库中的敏感文件及其历史记录。...在 Git 中，我们通常会将敏感信息(如密码、私钥等)存储在 .gitignore 文件中，以防止这些信息被意外提交到仓库。...背景因为我开一个新的项目的时候习惯先使用私有仓库，当完善的差不多的时候再转为公开，私有库就随便了些，可能存在一些不合适公开的一些信息，所以需要在转为公开仓库前检查删除一些内容。...2.3 运行git filter-branch 进入仓库目录，使用 git filter-branch 命令删除敏感文件及其历史记录。...结论本文介绍了如何使用 git filter-branch 命令手动删除Git仓库中的敏感文件及其历史记录。虽然这种方法需要一些手动操作，但它不需要安装任何第三方工具。

3914 0

如何删除GIT仓库中的敏感信息

这里我将演示一个故意写满“敏感信息”的Github仓库，然后一步一步演示怎么在历史记录中，删除“敏感信息”，以完成“脱敏”。...文件夹敏感删除 Program.exe 大二进制删除这个演示满载“敏感”信息的代码仓库，可以从：https://github.com/sdcb/sensitive-repo-demo 这里下载...如何删除敏感信息 2.1 前置条件必须先切换到主分支（一般为master），然后获取最新代码再进行操作： git checkout master git pull 如果有任何修改的对象，都会阻止提交，...（这里为AWS相关的key），右边为替换之后的值。...3.6 关于--no-blob-protection --no-blob-protection是指将历史中删除的记录，放到最新一次未签入的修改中： PS C:\Users\sdfly\Desktop\sensitive-repo-demo

3K6 1

Git 仓库瘦身与 LFS 大文件存储

熟悉 Git 的小伙伴应该都知道随着 Git 仓库维护的时间越来越久，追踪的文件越来越多，git 存储的 objects 数量会极其庞大，每次从远程仓库 git clone 的时候都会墨迹很久。...就算知道了是哪里个文件造成的，我们直接删除那个文件是没有用的，我们还需要删除那个文件对应的 Git Object 文件。...grep "$(git verify-pack -v .git/objects/pack/*.idx | sort -k 3 -n | tail -5 | awk '{print$1}')" 然后我们删除历史提交过的大文件...bigfile，从日志中我们可以看到本地仓库已经移除大文件成功了 ➜ git filter-branch --force --index-filter 'git rm -rf --cached --ignore-unmatch...master -> master 开启了 LFS 之后，对应大文件的内容存储在 LFS 服务器中，不再是存储在 Git 仓库中，Git 仓库中存储的是大文件的指针文件，LFS 的指针文件是一个文本文件

7444 0

Git 中文参考（六）

笔记 git gc 非常努力地不删除存储库中任何位置引用的对象。...然后有两种方法可以获得更小的存储库。更安全的方法是克隆，保持原始原封不动。用git clone file:///path/to/repo克隆它。克隆将没有删除的对象。...笔记 git-filter-branch 允许您对 Git 历史记录进行复杂的 shell 脚本重写，但如果您只是 _ 删除不需要的数据 _（如大文件或密码），则可能不需要这种灵活性。...--remote= 而不是从本地存储库创建 tar 存档，从远程存储库中检索 tar 存档。请注意，远程存储库可能会限制<tree-ish>中允许哪些 sha1 表达式。...$ git tag -f lastR2bundle master 然后将 file.bundle 传输到目标机器 B.由于此捆绑包不需要提取任何现有对象，因此可以通过克隆从机器 B 上创建新的存储库：

2841 0

从9G到0.3G，腾讯会议对他们的git库做了什么？

特殊分支处理说明：以上历史记录裁剪并删除历史提交记录执行完后，对于基于截断提交节点前的提交节点创建出来的分支或者其子分支会出现文件被删除或者整个分支被删除的情况。...7ffe6782272879056ca9618f1d85a5f9716f8e90" ] then echo else echo "$parent" fi' --tag-name-filter cat -- --all 第3步中删除截断节点前提交记录的...一般公司自己的代码管理平台都会提供设置单个 git 文件上传大小上限的功能，得管理员才有权限设置；腾讯的代码管理平台是像下图这样设置的：解释：之后的步骤将会把新老仓库互换，新旧仓库互换后，其它机器本地的老仓库分支还是有...0git config --global https.lowSpeedTime 999999 如仍然无法解决，可能是用户的客户端默认有设默认值限制 git 传输包的大小，可执行指令： git config...包，然后就可以在 python 代码中作为库使用：import git_filter_repo as fr。

9645 1

Git工作流协作的一些经验，分支、合并、提交，推送，移除历史

在实际使用中，我还是用图形软件 sourcetree为主，不过图形软件只是为了方便，并且有很多用法还是要实用命令行来解决，所以要先理解概念，再熟悉命令，最后使用工具。...当没有足够认可成为维护开发者，或者只是希望做一些定制化开发留为己用的时候呢，可以使用GitHub的fork功能。这里我设计了一张图来诠释fork时，repo之间的关系。...在fork之后，实际上我们不必把自己的仓库当成是树枝，当我们创建完分支后，两个仓库已经是对等的了。我们可以向源仓库推送更新，也可以把源仓库的更新当做推送方，合并到自己的仓库中。...在github中，两个仓库之间的拉取是很简单的，无论是希望推送，还是希望从源仓库更新都适用这个拉取。如果是希望更新就将两个仓库的顺序对转然后进行对比。之后就根据需要进行合并操作就可以了。...---- 移除所有记录中的文件 git filter-branch --force --index-filter 'git rm --cached --ignore-unmatch THE_FILE_PATH

5602 0

Git+Gerrit如何永久删除历史文件（大文件私密文件）

git reset --soft命令一样是无法将提交记录从仓库中抹掉的，虽然通过reset之后，大文件的提交记录在git log中已经查找不到，但实际上，这个记录并不会真正的从仓库中删除，只要能找到commit...id，依然可以从仓库中恢复该提交历史。...git filter-branch 1）前面两种修改的方式都是我们平时所熟悉的，使用频率比较高的删除某些文件或者提交记录的方式，但这些方式实际上都是生成了新的提交记录，并不会修改或者删除我们的提交历史...，也就是说，想要永久删除仓库中的某个文件，这样是行不通的。...Git这么强大，肯定是存在可以永久删除历史记录的命令，找了一圈，发现确实有“后悔药”命令，那就是git filter-branch，通过以下命令，就可以永久删除你想要删除的任何文件： git filter-branch

2.6K2 0

测试开发必会12个Git高级命令

将cherry-pick远程提交合并到自己的分支中更有甚者，如果只想将远程仓库的一个特定提交合并到自己的分支中该怎么做呢？...将子目录分隔为新的仓库有时，你可能需要将Git仓库中某个特定的目录转换为一个全新的仓库。...这可以通过git filter-branch来实现： $ git filter-branch --prune-empty --subdirectory-filter master Rewrite 48dc599c80e20527ed902928085e7861e6b3cbe6...虽然之前的所有文件都会被删除，但他们依旧存在于Git历史中。现在可以将新的本地仓库推送到远程了。 10....轻松的做法则是自动从tar文件中排除掉.git目录： $ tar cJf .tar.xz / --exclude-vcs 12. 查找修改者最后，如果出现混乱的情况，你一定想要找出是谁造成的。

8762 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云