文章/答案/技术大牛

发布

问CDH4.2.0无法设置HBase压缩
EN

Stack Overflow用户

提问于 2013-03-23 19:17:11

回答 1查看 1K关注 0票数 1

因为我们已经将CDH4.1.2的安装更新到了CDH4.2.0，所以我们不能再创建启用了压缩的新表。我们之前已经成功地使用了SNAPPY Compression。现在，当我们尝试执行create语句时：

create 'tableWithCompression', {NAME => 't1', COMPRESSION => 'SNAPPY'}

出现错误：

ERROR: Compression SNAPPY is not supported. Use one of LZ4 SNAPPY LZO GZ NONE

我们意识到也找不到其他的压缩算法:例如，'GZ‘也有同样的问题。

ERROR: Compression GZ is not supported. Use one of LZ4 SNAPPY LZO GZ NONE

我们添加了“导出HBASE_LIBRARY_PATH=/usr/lib/hadoop/lib/native/”到hbase-env.sh“。

不幸的是，这并没有解决我们的问题。

我们还能尝试什么呢？

compression

hbase

cloudera

回答 1

Stack Overflow用户

回答已采纳

发布于 2013-03-24 17:39:49

我得到了同样的结果。这似乎是admin.rb脚本中的一个错误。

有问题的代码如下：

      if arg.include?(org.apache.hadoop.hbase.HColumnDescriptor::COMPRESSION)
        compression = arg[org.apache.hadoop.hbase.HColumnDescriptor::COMPRESSION].upcase
        unless org.apache.hadoop.hbase.io.hfile.Compression::Algorithm.constants.include?(compression)      
          raise(ArgumentError, "Compression #{compression} is not supported. Use one of " + org.apache.hadoop.hbase.io.hfile.Compression::Algorithm.constants.join(" ")) 
        else 
          family.setCompressionType(org.apache.hadoop.hbase.io.hfile.Compression::Algorithm.valueOf(compression))
        end
      end

一些"p“语句之后，我知道了。压缩为"SNAPPY"，org.apache.hadoop.hbase.io.hfile.Compression::Algorithm.constants为[:LZ4, :SNAPPY, :LZO, :GZ, :NONE]。

看到区别了吗？我们在比较字符串和符号。快速解决方法是将设置压缩的代码行更改为以下内容：

    compression = arg[org.apache.hadoop.hbase.HColumnDescriptor::COMPRESSION].upcase.to_sym

我猜这与有大量不同的jruby变体和配置有关。我认为在某些情况下，常量是字符串，在其他情况下，常量是符号。更持久的解决办法是在比较的两端都使用to_sym。

票数 2

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/15586111

复制

相似问题

问CDH4.2.0无法设置HBase压缩
EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问CDH4.2.0无法设置HBase压缩EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问CDH4.2.0无法设置HBase压缩
EN