java压缩数据处理 - 腾讯云开发者社区

文章/答案/技术大牛

发布

1回答

除了性能改善外，如何最好地利用电容介绍？

google-bigquery

以下报价来自这会改变价格是基于压缩的数据还是未压缩的？据我所知，解压缩存储在bigquery中的数据是基于未压缩大小充电的主要原因。如果现在这个阶段消失了--价格方式会被改变吗？

浏览 2提问于2016-03-24得票数 3

回答已采纳

3回答

gnu.java.util.zip.dll v.6.0.140.8可以打开哪些版本/风格的WinZip？

java、zip、classpath

在评估第三方数据处理工具时，我遇到了一些WinZip文件导致异常的情况： at gnu.java.util.zip.ZipFile.getInputStream(ZipFile.java:470)我一直在寻找一些关于

浏览 2提问于2009-08-20得票数 0

回答已采纳

1回答

在数据流作业中从google云存储读取数据时，如何跳过头文件？

java、google-cloud-dataflow、dataflow

我正在研究一个数据处理管道，我们从云存储中读取大量文件。这些文件可能是带有标题行的csv文件，我需要删除它，这样才不会出现错误。如果可能的话，我很乐意使用：以及其他一些东西，因为它会自动处理压缩等。在java中实现这样的功能最简单的方法是什么？

浏览 0提问于2017-05-18得票数 0

1回答

如何压缩和解压缩箭或羽毛文件？

feather、apache-arrow

地板有压缩选项(lz4等)，我使用过它们。但我在羽毛和箭档案里找不到。不支持压缩吗？

浏览 0提问于2019-08-28得票数 3

回答已采纳

4回答

假设磁盘速度很慢，并且有多个内核，那么动态解压对性能有意义吗？

performance、architecture、compression、multicore、disk

过去，磁盘压缩被用来以牺牲效率为代价来增加存储空间，但那时候我们都是在单处理器系统上。有没有人有任何经验来支持或拒绝这个猜想？

浏览 0提问于2009-12-04得票数 2

回答已采纳

2回答

如何在C++中打开和修改png

c++、png、jpeg

如何显示png (通常是.bmp旁边的图像)获取特定像素(x，y)的深度、颜色(r、g、b)，以及如何更改一个像素，然后保存图像。我找不到任何简单的例子。请出示样品

浏览 8提问于2012-11-19得票数 0

回答已采纳

4回答

Dell Boomi:如何将多个附件添加到一封电子邮件

integration

我希望任何人都能帮助我解决我在使用Dell Boomi时遇到的这个简单问题。

浏览 8提问于2015-07-07得票数 0

1回答

首先从Java方法返回，然后再进行处理

java

我必须为for服务编写一个java方法。java方法将采用很少的参数，然后开始一些耗时的数据处理。在后台进行数据处理的同时，从方法返回uniqueId的最好方法是什么？使用线程是个好主意，还是有其他解决方案呢？

浏览 0提问于2015-02-16得票数 0

1回答

调试，测量django中的时间图像上传

python、django、file-upload、upload、image-uploading

我在django (Django 1.8 -我知道它很旧)的项目中有一个问题，上传照片。关键是这太慢了。

浏览 1提问于2018-09-07得票数 0

6回答

Java数据处理

java、groovy、calendar

给出了java.util.Date的一个实例，即星期日。这个项目实际上是一个Groovy项目，所以我可以使用Java或Groovy来解决这个问题。谢谢你，Donal

浏览 2提问于2010-05-21得票数 4

4回答

Java的数据流编程API？

java、concurrency、multicore、dataflow

我正在寻找一个用于Java的数据流/并发编程API。有什么想法吗？谢谢，罗洛

浏览 0提问于2008-10-02得票数 8

1回答

为了测试目的，是否有可能和安全地将函数替换为time()或for ()？

python-3.x

我必须创建和测试一些执行时间戳数据处理的库。为了实现它，我需要利用自己的源压缩和移动的“虚拟”时间。

浏览 2提问于2016-02-01得票数 1

回答已采纳

1回答

tar返回错误，但仍然解压缩文件，即使使用了"tar -no-忽略-命令错误-xvzf file.tar.gz“。

tar、error-handling

我有一个名为file.tar.gz的损坏文件，我希望它的提取失败。我使用了tar --no-ignore-command-error -xvzf file.tar.gz，但它仍然提取文件，忽略了错误：gzip: crc errorDBversiontextual_db.txttar: Unexpected EOF in arc

浏览 0提问于2018-10-15得票数 0

1回答

多线程在有限源的apache光束管道中是如何工作的？

apache-beam

我是大数据处理方面的新手。我正在使用apache beam Java SDK来处理它。尝试了解多线程/并行数据处理在apache光束管道中是如何工作的。

浏览 9提问于2020-07-23得票数 0

1回答

具有R的H2O :内存需求

r、in-memory、h2o

我一直在研究机器学习平台，并试图弄清楚它与R一起使用是否允许R处理真正大的数据(笔记本电脑上的>>可用内存)，还是仍然受内存数量的限制？我认为，由于是“内存中”，这意味着它仍然需要大量的RAM或服务器集群？有人有这方面的经验吗？

浏览 3提问于2015-01-03得票数 0

回答已采纳

3回答

我有一个以竖线分隔的文本文件，大小为360 is，压缩(gzip)。该文件位于S3存储桶中。这是我第一次使用Spark。有没有办法使用多个spark worker节点来处理我的一个压缩文件，以便对其进行分区？不幸的是，我无法控制我只是得到了一个很大的文件。我可以自己解压缩文件并将其分解成许多文件(比如360个1 1GB的文件)，但我只使用一台机器来做这件事，速度会相当慢。我需要使用Spark在数据上运行一些昂贵的转换，所以我认为对文件进行分区是必要的。

浏览 1提问于2017-10-25得票数 4

4回答

这里最适合的是哪个java webserver？

web-applications、glassfish、webserver、jetty、httpserver

在客户端和数据处理实体之间进行接口的Java the服务器。 ( a)在java (com.sun.net.httpserver)中使用httpserver类并创建多线程进程。缓存是在not服务器上完成的，如果数据处理实体没有将数据标记为脏的，则从not服务器本身提供请求。谢谢。罗恩。

浏览 2提问于2009-09-21得票数 1

回答已采纳

1回答

用javascript下载深度数据的最好方法？

javascript

数据由512x256个深度条目组成，以压缩的二进制格式存储，每个条目的精度为两个字节。数据必须可以从CPU读取，所以我不能将数据存储在纹理中。我已经在Unity中工作了，但我不确定如何使用javascript / three.js下载像这样的压缩深度。我刚接触javascript，但它对二进制数据处理和压缩的支持似乎很有限。

浏览 12提问于2020-02-23得票数 1

回答已采纳

1回答