1回答
我需要传输一个大文件从PC到PPC (Pocket )，但我不能使用RAPI。
我需要：
formatTransfer中的将.sdf (大)文件转换为二进制到PPC (通过Web服务)从二进制转换为.sdf
问题是，在PPC中，我得到了一个异常“内存不足”(在大文件中)。用一个小文件，它工作得很好。
我能做什么?也许我能把文件分片送去？
浏览 1提问于2009-04-07得票数 0
我想在一个Plone站点上提供大量的大文件。说到大文件，我指的是大约5MB (音乐)，而且很多。我已经直接跟ZODB说过了，不是个好主意。我运行的是Plone 3.1.1和Zope 2.10.6。
浏览 0提问于2008-09-15得票数 6
我正在阅读关于的文章，并一次又一次地看到它对“大文件”很有用。
Git大型文件存储(LFS)取代大型文件，如音频示例、视频.
使用Git版本的大型文件--甚至那些大小可达几GB的文件。
Git大型文件存储(LFS)是一个免费的开源扩展，它用Git内的文本指针替换大型文件，并将这些文件的内容存储在远程服务器上。
不幸的是，我在任何地方都看不到“大文件”到底是什么。很明显，占用数千兆字节的东西是一个大文件，但是更小的文件呢？
我会从Git LFS中受益吗?它的“大文件”小到50 MB? 20 MB? 5MB? 1MB？不到1MB？
与普通Git相比，“大文件”必须从
浏览 1提问于2018-02-27得票数 48
回答已采纳
2回答
Redis工作/响应缓慢的原因可能是什么？
例如，我在Stackoverflow上发现，在Redis中存储大文件或数据会使速度变慢。还有什么？
浏览 0提问于2012-11-19得票数 10
回答已采纳
我们将文档存储在SQL Server2005数据库表中，列格式为"Image“。
每次我尝试存储大于1兆的PDF文件时，它都会以某种方式被损坏。
在.NET中，有没有什么特别有效的方法来序列化大文件(~10MB)并将其存储到数据库中？
编辑微软实际上说最大文件大小大约是2G可变长度的二进制数据，从0到2^31-1 (2,147,483,647)字节。
浏览 2提问于2009-07-31得票数 3
回答已采纳
当我尝试添加文件时，突然出现了这个错误。我在Linux上的headnote集群上运行了git，并且有足够的空间来存放我的文件。我所有的大文件都定义在.gitignore文件中。 错误： error: file write error: Bad file descriptor
fatal: unable to write sha1 file
浏览 133提问于2020-12-05得票数 0
回答已采纳
我的团队正在使用两个遥控器：origin和backup。
backup是基于GitHub的，所以它不支持大文件。有人用一个大文件提交了origin，从那时起，我们都提交了无数次。
我们已经删除了那个大文件.(实际上，我没有用它完成提交，而且我不认为我真的下载了它，因为它在接下来的提交中被删除了)。
我试过了
git checkout master
git checkout --orphan tmp
git commit -m "Root"
git push backup master
但是，由于该大文件超出了大小限制，push失败了。
如何将origin 的当前状态推送到 ba
浏览 1提问于2018-05-06得票数 0
2回答
假设我有一个包含许多已经序列化的对象的大文件(这是最简单的部分)。当我去反序列化时，我需要能够随机访问文件中的对象。我能想到的唯一方法就是以某种方式存储指向每个对象的文件指针。
基本上，我最终会得到一个包含序列化对象的大文件，并且不希望在仅检索一个对象时反序列化整个文件。
在这个问题上，谁能给我指出正确的方向？
浏览 1提问于2016-04-29得票数 0
2回答
Java更新大型二进制文件
、、、、
所以我开发了Android应用程序，有点像读书机。书籍以500mb+二进制文件的形式存储，其中存储某些对象，并存储在一个小二进制文件中，其中包含到大文件中特定对象的映射。我需要找到最有效的方法来执行某个发布文件的更新。插入更新包将包含相对较小的文件，其中包含需要从原始大文件中删除的对象的偏移量+长度，将在大文件末尾添加的一组新对象，以及更新完成后的新映射。
我已经搜索了很多，但是我仍然找不到比把我想要保存到一个新文件中的内容复制更好的解决方案。有什么更有效的方法吗？我的意思是，我提到的aproach需要双磁盘空间作为主要的大文件，它似乎也不是任何快速的方式。
Thx提前，Mac
浏览 7提问于2013-11-21得票数 0
回答已采纳
我想为大量用户管理大文件(超过1 GB)的版本控制。他们都在相同的共享环境中工作，我们不能让他们每个人都"svn更新“这些大文件作为他们的本地副本。编辑:用户经常需要处理这些大文件。
有没有人能建议: 1.处理这些问题的最佳实践是什么? 2.有没有办法让用户只“更新”存储库中的一个大文件的链接？
提前感谢！
浏览 0提问于2012-11-15得票数 1
我的git库有一定的最大文件大小限制。我的本地存储库有一些大文件。是否可以仅对未超过文件大小限制的文件执行push操作？如果是这样，该怎么做呢？
是否有必要对较小的文件进行单独的提交以推送它们，或者我是否可以只使用包含所有文件(大文件和小文件)的提交？
浏览 0提问于2018-04-25得票数 1
1回答
我目前正在VirtualBox VM上尝试一个新的服务器设置。在我的场景中，我附加了两个(虚拟)硬盘；我使用一个作为主系统磁盘，另一个作为本地备份驱动器。备份由borg/borgmatic对备份驱动器执行。我计划稍后在真正的服务器上使用相同的设置(使用真正的磁盘)。
为了测试我丢失了系统磁盘并试图获取备份系统上的数据的场景，我创建了一个具有新系统磁盘的新虚拟机，并将现有磁盘附加到VM。fdisk -l将将现有驱动器显示为/dev/sdb1。
当我用mount /dev/sdb1 /backup挂载这个驱动器时，我没有看到先前在驱动器上的内容，到目前为止我还没有找到访问它们的方法。
在挂载时，f
浏览 0提问于2021-12-27得票数 2
我目前正在寻找设置SVN镜像的最佳方法。目前，我看到了三种可能性，它们都有各自的缺点：
有一个SVN后提交-挂钩，这是阻塞和同步通过svnsync。这里的问题很明显，提交是阻塞的，直到数据被传输到镜像。
有一个SVN后提交挂钩，是非阻塞和同步通过svnsync。在这里，我看到了以下更微妙的问题:假设有人签入一个大文件，而在此之后不久，另一个人签入了一个小文件。因为提交是非阻塞的，两个svnsync进程可以同时运行，小文件可以在镜像的过程中超过大文件(这看起来非常重要，而且不太可能，虽然原则上是可能的)。他们的修订将互换。
就像每十五分钟和一次任务同步一样。同样的问题，如果提交时间超过15分钟，
浏览 0提问于2010-03-03得票数 10
回答已采纳
有很多类似这个问题的问题，但是我找不到一个可以解决我的问题
问题是这样的:前一段时间我在gerrithub项目中签入了一个大文件，后来在我删除它的地方进行了签入，不知何故，这个大文件停止了自动复制到Github，后来我注意到了这一点-然后我想删除这个大文件，并将我最新的更改合并到github，但是当git试图合并时，这个大文件一直弹出来
-o-o-o-o-o-x-o-o-o-o master
|
o-o-o-o mybranch (origin where issue large file was added)
|
o = (where
浏览 1提问于2015-12-28得票数 0
1回答
当我在星火集群上处理一个大文件时，会出现内存不足的情况。我知道我可以扩展堆的大小。但在更一般的情况下，我认为这不是一个好方法。我很好奇把大文件分成成批的小文件是个不错的选择。因此，我们可以批量处理小文件，而不是大文件。
浏览 5提问于2017-03-24得票数 0
回答已采纳
2回答
我有一个目录，其中包含我的代码和非常大的文件(例如，数据文件和大型深度学习模型)。忽略这些大文件，我已经将代码上传到GitHub存储库。 现在，我还设置了一个远程服务器(AWS EC2)，我已经在其中克隆了该存储库。但是，因为我想要处理数据和这些大文件，所以设置一个好的工作流的最佳方法是什么？我是否应该将这些文件上传到我的服务器上，然后设置一个.gitignore --有没有更聪明的方法呢？ 对于这个菜鸟问题，很抱歉，谢谢！
浏览 20提问于2020-10-09得票数 2
1回答
我用MVP。假设我想下载大文件(大小为20 MB)。
以下是备选方案：
在演示器中下载文件
模型中的下载文件
服务中的下载文件
一些其他的东西
什么是最好的解决方案？
活动随时都可能破坏。当旋转屏幕时。
浏览 1提问于2017-12-11得票数 2
4回答
在数据库中存储大文件(大约100 GB)是个好主意吗？
目前，我们考虑使用NBT格式或mysql/postgresql数据库将数据保存在文件夹中。
浏览 0提问于2013-08-18得票数 3
有没有办法将存储桶中的TSV文件转储到GCP云MySql中？我有一个4M行的TSV大文件。
我不能把它转换成CSV。
浏览 4提问于2019-11-25得票数 0
我一直在阅读Artifactory文档，我正在努力理解使用Git LFS的工作流是如何工作的，或者为什么我会想要使用Git LFS。如果你想有选择地下载完整的大文件，你会只使用Git LFS吗？
在我的例子中，我有一堆大文件，在使用Git LFS跟踪之后，我尝试将它们上传到Github中。公司管理员说我的repo对Github来说太大了，并建议使用Artifactory。
我正在学习将我的大文件上传到Artifactory的命名空间中。当我将来更新这些文件的版本时，我不能直接将它们上传到Artifactory吗？当我想下载这些文件时，我需要完整的大文件。我只想要一种方法来获得大文件的最新版本，
浏览 4提问于2018-03-03得票数 1
3回答
在我们的项目中，我们尝试在nosql数据库中存储大文件，比如图像。在进行一些研究的同时，我们听说了Azure Cloud平台上的Document Db nosql数据库。此外，我们将存储我们的数据在Azure。
在Azure平台中存储大文件的最佳方法是什么?文档Db足够好吗?在Azure中使用MongoDb合适吗？
浏览 7提问于2015-01-21得票数 1
回答已采纳
我是AppEngine的新手，我正在构建一个应用程序，可以接受来自安卓设备的用户图像上传。
我用云存储构建了它，但后来我意识到我在上传大文件时遇到了问题(可能是因为请求时间限制？)
所以我想我应该使用Blobstore的上传URL来正确地上传多个大文件。Blobstore还具有动态调整图像大小的功能，这是非常好的。
问题是，云存储比水滴商店更便宜。
上传后，是否应该将上传的文件从Blobstore移动到云存储？
有没有一种方法可以将多个大文件上传到AppEngine，而不需要通过Blobstore上传URL的方式？
如果重要的话我会使用Go ..
浏览 1提问于2013-04-20得票数 2
我有一个33 MB的大文件，我想永久删除该文件的最旧版本，因此只保留最新的X版本。该怎么做呢？
正因为如此，我的裸库变得越来越庞大。
我尝试过以下几种方法..但它会完全删除该文件
git filter-branch --index-filter 'git rm --cached --ignore-unmatch big_manual.txt' HEAD
为了识别我的存储库中的大文件，我使用。
浏览 1提问于2009-05-30得票数 20
回答已采纳
我的团队在一个项目中工作，该项目包含一些大型数据文件，这些文件是我们开发过程中不可或缺的，需要进行版本控制。然而，有些时候(比如我在家里或在星巴克)，我真的不想为那些大文件中的小改动而烦恼。我有一些想法，比如将所有大文件转移到一个分支(即，全面测试)，只有当你准备好处理大文件时才切换到这个分支。我想知道是否有其他人想出了更好的方法来处理这种情况。
浏览 0提问于2018-02-20得票数 3
2回答
我想在使用c#时重命名大文件。如果我有几个大文件，如果我使用.IO.move函数，我的文件将以正确的名称复制，而旧文件将被销毁。对于大文件，这将需要很长时间
我找不到一个好的解决方案。谁有适合大文件的想法？
浏览 0提问于2011-12-30得票数 0
我试图在indexedDB中保存大文件，但当我使用大于500MB的文件时，chrome停止响应。我的目标是在indexedDB中存储100 it的文件，还可以检索并下载相同的文件。
所以基本上我需要使用indexedDB作为大文件存储。
请帮助我实现这一点。
浏览 1提问于2020-09-04得票数 1
1回答
如何通过流对象向服务发送剪辑计算机上大文件的引用，然后开始从客户端计算机逐段下载它(我决定每秒传输多少MB )？我使用它的时候有什么限制吗？
浏览 0提问于2012-05-01得票数 2
回答已采纳
Git大文件系统git-lfs可用于存储大型文件，并在txt文件中存储git存储库。问题是何时应该决定一个文件是否应该转到git，如果这样做了，现有的CI配置是否会中断。
有时会将jars添加到存储库中，比如gradlew.jar。在我看来，像jars这样的二进制文件不应该存储在git中，因为这些不是改变的文本文件，但是二进制文件并不一定很大。
目前，我们有多个包含jar文件的git存储库。我想知道这些罐子是否应该被移到git-lfs。
浏览 0提问于2017-11-30得票数 5
回答已采纳
我正在尝试将大量文件从一个存储桶同步到另一个存储桶，在使用aws cli的s3同步命令后，其中一些文件的大小达到2 2GB，如下所示
aws s3 sync s3://bucket/folder/folder s3://destination-bucket/folder/folder
通过验证已经传输的文件，很明显大文件已经丢失了原始存储桶中原始文件上存在的元数据。
这是一个较大文件的“已知”问题，其中s3切换到分块上传来处理传输。这个多部分处理可以通过.aws/config文件进行配置，如下所示
[default]
s3 =
multipart_threshold = 4500MB
浏览 0提问于2019-11-13得票数 0
我想为单元测试(大文件解析器)生成一个测试场景。在编译过程中，有一个测试文件并在其上执行I/O，或者使用一些静态参数生成一个大内存缓冲区，什么会更快呢？
浏览 0提问于2018-03-18得票数 -7
我花了很长时间阅读并试图弄清楚git commit --amend，但我仍然不明白#是如何在editmsg中使用的。
我担心在不知道我在做什么的情况下编辑这篇文章，因为我读过git commit --amend只做最近的提交，一旦我保存并退出，它将被算作新的提交。
我意外地提交并推送(但推送失败)了一些大文件。但我也编写了一些脚本，这些脚本应该是从与大文件相同的提交中推送的。
我正在尝试删除新提交中包含大文件的行，但我不知道如何执行此操作。
这是我下面的提交文件，但我不理解是否应该删除带有#的行(我尝试过，但它不起作用，并且git日志是相同的)：
the commit message of t
浏览 6提问于2018-02-09得票数 1
我知道MongoDB接受和检索作为JSON/BSON对象的记录，但是它实际上是如何将这些文件存储在磁盘上的呢？它们是作为单个*.json文件的集合存储还是作为一个大文件存储？我对后者有一种预感，因为MongoDB文档指出，它在装有ext4/xfs的系统上工作得最好，后者更擅长处理大文件。有人能证实吗？
浏览 0提问于2010-11-09得票数 70
回答已采纳
3回答
我想要复制一个文件夹中的大文件到天蓝色存储。
我发现这篇文章展示了如何将公共aws桶复制到azure：
但是，如果aws桶是私有的，我该怎么做呢？如何将凭据传递给azcopy，以便它将我的文件从aws桶中直接复制到蔚蓝中？
浏览 8提问于2020-12-24得票数 1
回答已采纳
2回答
我正计划建立一个大文件服务器。(Windows或FreeNAS)。
我至少需要300吨的空间。我有什么选项可以把所有的磁盘都放在一起呢？
我的意思是，在物理层面上，我可以使用什么样的连接拓扑？什么样的设备支持如此庞大的磁盘？它不是你只需要8或10个SATA端口在主板上，然后你就可以做一个RAID，它一定是某种特殊的设备，对吗？
我还在做这方面的研究，有人有什么建议吗？
浏览 0提问于2014-01-21得票数 -1
2回答
我正在构建一个使用node.js/express和MongoDB的视频流媒体web应用程序。但我面临着一个问题，即在哪里存储我的客户将上传到我的后端的mp4文件。我不确定MongoDB是否能够存储大文件(按GB顺序)，我目前的想法是将文件保存在一个目录中，然后跟踪MongoDB上的每个文件路径。这是一个好主意，还是有更好的方法呢？
浏览 2提问于2018-05-04得票数 1
我已经阅读了来自的问题。
但是，答案中的代码表示，文件会先上传到Blobstore，所以文件不能超过32MB。
如何将大文件直接上传到Google云存储？
我已经检查了官方文档，但我仍然不知道如何编写一个表单来发布一个大文件。
浏览 1提问于2012-07-06得票数 4
回答已采纳
我需要上载一个大文件(140 mb)到Azure文件共享。请告诉我在C#中使用FileShareClient上传方法可以上传多少大文件
浏览 2提问于2021-12-03得票数 0
1回答
我使用php (mime.php)在邮件中附加了大约0.5到1mb的大文件
我附加文件并发送邮件，但在邮箱中，文件名未知，也不显示正文。所以请让我高兴。
如何用php (LAMP)上传邮件中的大文件？
浏览 2提问于2012-04-28得票数 0
嗨，我在大文件上传组件上工作。我正在寻找上传大文件的有效方法。我在谷歌上搜索了一下，发现通过对大文件进行切片并异步上传的方式做的很少。我正在寻找Wicket中类似的实现。在Wicket中有没有类似的方法来实现同样的目标？
浏览 0提问于2014-07-14得票数 1
因此，我在理解我应该如何存储大文件时遇到了一些问题。例如，我的HDFS中的块大小是128MB，而我有一个1 1GB的文件。
我知道保存小于块大小的文件不是最佳实践，我理解其中的原因。
但是我应该如何处理大文件，对于我的1 1GB文件，我应该保存1个文件还是8个128MB的文件，为什么？
浏览 20提问于2019-10-29得票数 2
回答已采纳
我们正在使用钛来开发Android应用程序。我们有一个接近4MB大小的数据库，并获得错误信息。
“D/资产( 310)：数据超过UNCOMPRESS_DATA_MAX (3964928比1048576)”
在模拟器中运行时。我了解到这是因为android只支持1MB作为2.2中的最大文件大小。
我们如何用钛来修正2.2的这个问题呢？
浏览 7提问于2011-06-22得票数 0
1回答
Django保存大型文件
、、、
我正在创建一个网站，用户可以上传大文件。大约100到300兆。我正在使用django，但是我想知道保存文件的最佳选择是什么。我应该把它们添加到我的用户数据库中吗？或者我应该创建一个媒体文件夹并将文件保存在那里。如果是这样的话，那么这意味着我必须将文件的名称保存在我的用户数据库中？
请告诉我你将如何处理这个问题。
浏览 5提问于2020-07-17得票数 1
回答已采纳
6回答
我想知道有没有一个库可以打包你所有的配置文件等，并将它们放在一个大文件中，供你以编程方式访问。
我知道有SQLite，但我不想使用sql引擎，我只需要一个应用程序接口，给我一个大文件内的文件句柄，并管理这个大文件的效率或损坏。
优选的语言是Java、c、c++和os是windows。
thx
浏览 0提问于2012-01-20得票数 2
回答已采纳
我想在S3上载大文件。我知道有一个选项multipart upload，我可以通过它来分块上传大文件。我阅读了文档()，但没有找到任何用于分块上传的代码。我已经成功地将一个文件作为单个文件上传到服务器上，但我想对大文件使用多部分。
谢谢。
浏览 3提问于2016-09-29得票数 2
有没有办法使用Github API重命名文件？
目前，我正在使用GET /repos/:owner/:repo/contents/:path获取文件内容，使用该内容和所需名称创建一个新文件，然后删除原始文件，这可能会对服务器上的大文件造成相当大的负担。当然还有更好的方法！
浏览 1提问于2015-01-25得票数 1
我有一堆台式机，我想连接在一起，并使用作为一个大文件服务器。我希望能够用一个IP访问所有硬盘。我一直在与FreeNas和OpenFiler玩，但似乎无法得到任何信息，我正在寻找什么。
类似于贝奥武夫计算，但不是并行计算，我想将它用于并行存储。
这个是可能的吗？
谢谢你，巴拉吉
浏览 0提问于2010-07-22得票数 1
1回答
我知道这个问题被提出了很多，但我没有找到任何解决方案。我正在尝试使用https上传大文件，但是我得到了异常“I/O error during system call，Broken”当我使用http上传时，同样的代码也可以工作。
我读到这个问题是在Android2.3上发现的，我正在使用Android4.3，它仍然在发生……
当我上传小文件时也会发生这种情况。如果我删除con.setChunkedStreamingMode(1024)；并以一个块的形式上传文件，那么小文件就不会发生这种情况(我不能对大文件执行此操作)。
浏览 1提问于2014-10-01得票数 7
2回答
首先，我创建了一个新的分支来推送代码，然后它给出了src.zip大文件的错误，所以我通过遍历文件夹删除了那个大文件，我再次推送了相同的代码，但它仍然显示我已经删除的那个大文件错误。此外，我创建了一个新的分支来推送，但它也显示了与此分支上的大文件相同的错误。这里是NewBie，请帮帮忙。
Uploading LFS objects: 100% (304/304), 307 MB | 1.1 MB/s, done
Enumerating objects: 1210, done.
Counting objects: 100% (1210/1210), done.
Delta compression
浏览 1提问于2021-03-27得票数 0
4回答
我目前正在开发一个传统的整体式应用程序，但我正在将其分解为由kubernetes管理的Spring微服务。该应用程序允许上载/下载大文件，这些文件通常存储在主机文件系统中。我想知道在微服务架构中持久化这些文件最可行的方法是什么？
浏览 3提问于2018-10-26得票数 7
我刚刚得到了最新的变化无常，并开始添加大文件。
然而，现在我无法推动改变：
abort: ssh://hg@bitbucket.org/mysite/bitbucket.org does not appear to be a largefile store
我现在怎么才能推到bitbucket呢？我有多个提交，包括大文件和常规代码提交。我不介意只对我添加的所有大文件进行forget处理，但是我如何在不恢复所有真实提交的情况下做到这一点呢？
浏览 6提问于2012-01-24得票数 5
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
