我们有一个带有hadoop-1.0.1的hbase-0.94集群。我们不希望在使用hadoop-2.5.1升级到hbase-0.98时此群集出现宕机
我使用hadoop-2.5.1配置了另一个hbase-0.98集群，并希望将hbase-0.94表复制到hbase-0.98。Hbase CopyTable似乎不适用于此目的。
请建议一种执行上述任务的方法。
浏览 2提问于2016-07-27得票数 2
我使用apache在hbase中存储数据，hbase使用hdfs作为其文件系统。我想知道它存储在hbase中的哪些文档。如何读取hbase中的数据，例如，一些pdf存储在hbase中。我想读一读。我会怎么做。
请指引我？
浏览 2提问于2014-09-22得票数 0
回答已采纳
1回答
Hello :)我正在准备将1HBase表的整个数据移动到hive。表的大小非常大(500TB) 作为搜索的结果，有hbase导出，但仅支持hbase和hbase之间的数据移动( hdfs中丢弃的文件不是纯文本，因此hive无法立即读取它们)此外，由于hbase是远程群集和各种安全策略，无法使用hbase的hbase处理程序。 如果能像Hive to Hive那样支持INSERT INTO语法就好了，但我正在寻找另一种方法。有没有用逗号分隔Hbase表的每一列并将其放到hdfs中的好方法？
浏览 14提问于2020-08-27得票数 1
我正在使用：
单节点Hadoop 2.7.1
HBase 1.1.2与HDFS，单节点
凤凰4.6
所有东西都运行在Docker上，在单独的容器上，在Docker网络()上。
我复制了罐子：
cp /usr/local/phoenix/phoenix-4.6.0-HBase-1.1-server.jar /usr/local/hbase/lib/
运行HBase是可以的。
如果我在HBase容器中使用HBase，工作正常。但是如果我在另一台机器上运行相同的东西，我就会超时。
我可以看到HBase动物园管理员正在获得连接：
hbase_1 | 2015-12-03 09:4
浏览 4提问于2015-12-03得票数 2
1回答
我正在尝试扫描hbase表，并按列值筛选行。
我使用的shell命令：
scan 'audit', {COLUMNS => 'cf1:n_id', LIMIT => 1, FILTER => "ValueFilter(=, '723270266')"}
但是，得到以下错误：
Caused by: java.lang.IllegalArgumentException: Incorrect comparator
at org.apache.hadoop.hbase.filter.ParseFilter.parseCo
浏览 4提问于2013-01-02得票数 0
回答已采纳
我正在尝试建立与菲尼克斯的连接，使用DBVisualizer，但获得以下错误
下面的步骤给出这里的
之后，获得错误，如下面的ERROR 103 (08004): Unable to establish connection
当检查DBVisualizer的错误日志时，可以看到下面的内容
2019-07-22 12:53:18.890 INFO 903 [ExecutorRunner-pool-3-thread-1 - H.Ĵ] Exception while connecting Hbase
java.sql.SQLException: ERROR 103 (08004): Unabl
浏览 3提问于2019-07-23得票数 1
1回答
有没有人能推荐一个可视化的oracle数据库架构工具？我已经使用mysql服务器的mysql工作台。我正在试着为oracle数据库找出同样的工具。
浏览 1提问于2012-08-11得票数 0
回答已采纳
1回答
我想使用hbase导出创建我的hbase表的备份。问题是我的行数非常大，并且我得到了一个java堆空间错误。有没有什么参数可以用来限制每一步的复制大小？
我使用以下命令：
hadoop jar /usr/lib/hbase/hbase-0.90.3-cdh3u1.jar export tableName backupPathOnHdfs numberOfColumnFamiliesVersions
或
hbase org.apache.hadoop.hbase.mapreduce.Export tableName backupPathOnHdfs numbe
浏览 0提问于2013-02-19得票数 0
我的项目正在与使用Avro的另一个项目集成。该项目开始使用HBase，使用一些HBase Avro API会很有用，但根据的说法，在HBase 0.96.0中已经删除了对avro网关的支持。在开源领域的任何地方都有可能找到这个门户吗？我深入研究了github和*.apache.org，但没有发现任何有用的东西。
浏览 0提问于2013-02-01得票数 4
回答已采纳
我试图使用Importtsv将csv文件加载到Hbase。
我已经将customers1.csv上传到hdfs，使用命令创建了一个名为t1的hbase表。
hbase(main):001:0> create 't1','FirstName','LastName'
当我试图通过运行命令将csv数据加载到hbase表t1时：
hbase(main):010:0> hbase org.apache.hadoop.hbase.mapreduce.ImportTsv-Dimporttsv.separator=',' -Dimpo
浏览 2提问于2017-07-25得票数 0
我使用伪分布式模式创建了一个hbase测试ENV，并且我没有设置独立的动物园管理员，我想知道如何连接到由Hbase管理的动物园管理员？我在hbase安装文件夹中找不到zkCli.sh。
非常感谢。
浏览 4提问于2016-05-26得票数 2
回答已采纳
我有HBase元表，它包含一些关于已经删除的表区域的记录。那行不包含区域信息，所以没有什么真正有害的，但无论如何，它不是那么好。
当然，我可以手动删除适当的行，但也许有一些可以使用工具或“最佳实践”的方法？我试过hbase hbck和hbase hbck -fixMeta ..。他们都认为这种情况是正常的，不做任何更正，但当我使用API HBase检查区域位置时，会输出大量关于元数据中的记录的警告，这些记录中没有嵌入区域信息，这实际上是正确的。
HBase 0.94.6 (ClouderaCDH4.4)。这种情况有什么自动的解决办法吗？
浏览 0提问于2013-10-24得票数 0
回答已采纳
我在Hbase中通过nutch保存了我的爬行数据，其文件系统是hdfs。然后，我通过命令将我的数据(hbase的一个表)直接从hdfs复制到某个本地目录。
hadoop fs -CopyToLocal /hbase/input ~/Documents/output
之后，我通过以下命令将数据复制回另一个hbase (其他系统)
hadoop fs -CopyFromLocal ~/Documents/input /hbase/mydata
它保存在hdfs中，当我在hbase中使用list命令时，它将它显示为另一个表，即“mydata”，但当我运行scan命令时，它表示没有带有“mydata”
浏览 2提问于2014-09-18得票数 11
回答已采纳
5回答
我们在我的办公室里使用了很多SQL，但我们最终还是想使用HBase，因为它是新一轮的技术浪潮。但是SQL有HBase没有的分组和聚合函数和等式，我们正在研究如何将这些功能放到HBase中。我已经看了很多，但是没有发现任何有用的东西来开始我的实现。对于如何将SQL函数移植到HBase，有什么建议吗？这有可能吗？
浏览 2提问于2012-06-27得票数 0
2回答
如何HBase表数据转换.CSV文件，我试图转换表数据到csv格式，但我不能得到任何代码hbase001>表sample_data
浏览 0提问于2018-06-22得票数 0
我正在考虑在我的项目中使用HBase。我有一些加密文件(它们是在文件级别加密的，而不是列级加密或行级加密)，并且希望将它们的解密内容存储到HBase中。我们在我们的项目中使用星火。
是否有办法在解密文件的同时摄入HBase，这样就不会有一个包含解密文件的中间存储位置？
因为我还没有，所以还没有安装HBase，所以我没有尝试过的任何代码。
如果这个问题太宽泛，我可以修改它。我不知道怎么才能不把这个问题写得这么宽泛。
浏览 1提问于2019-08-13得票数 1
2回答
我在hbase( hdfs)表中有一些数据，并将其复制到本地文件系统中。然后，在我的第二台计算机上，我使用copyFromLocal hadoop命令将数据从本地复制到hdfs。现在，当我在hbase中运行命令"list“时(在第二台计算机上)。这表明没有桌子。我在hdfs中的一个目录(即hbase的数据目录)中复制了表，所以这个表应该出现在hbase中。
问题出在哪里？在这两台机器上，hbase和hadoop的版本是相同的。如何将hbase表从一个集群复制到第二个集群？
浏览 1提问于2014-12-29得票数 1
回答已采纳
1回答
我有一个程序hbase和mapreduce。
我把数据存储在HDFS中，这个文件的大小是: 100G。现在，我将这些数据放到Hbase中。
我使用mapreduce扫描这个文件丢失了5分钟。但是扫描hbase表花费了30分钟。
如何在使用hbase和mapreduce时提高速度？
谢谢。
浏览 1提问于2012-11-09得票数 0
在从hbase集群中删除几个节点时，我们过早地退出了hadoop (在退役之前)。当我们运行hdfs fsck时，我们意识到有几个缺块。我们立即将删除的节点添加回集群。fsck仍然报告说有一些块丢失了。
同时，HBase无法从这些区域找到这些丢失的块。最好的解决办法是什么？我们知道HBase无法找到的HDFS文件的位置。
更新：
更正- namenode只拥有丢失块的元数据。真正的街区不见了。现在我们如何修复HBase以从区域服务器中删除这些数据块？
浏览 2提问于2012-07-19得票数 0
回答已采纳
3回答
是否有任何方法可以读取文件中的数据并将其放入Hbase表，而无需使用任何java？我试图通过以下方法存储pig脚本中的数据
sample = LOAD '/mapr/user/username/sample.txt' AS (all:chararray); STORE deneme INTO 'hbase://sampledata' USING org.apache.pig.backend.hadoop.hbase.HBaseStorage('mysampletable:intdata');
但这给出了这样的错误信息：
错误org.apache
浏览 8提问于2012-12-10得票数 1
回答已采纳
1回答
我正在尝试与Pentaho合作，以便构建一些大数据解决方案。但是Hadoop HBase组件没有出现在仪表板中。我不明白为什么HBase没有出现，因为HBase正在我的机器上运行……我一直在寻找解决方案，但没有成功...
浏览 13提问于2017-07-17得票数 1
所以我有一个很大的服务器，里面有各种各样的Open/Office文件、工程数据和whathaveyou，我在寻找一种很好的方法来索引所有的数据，并创建一个标记或关键字云。在Ubuntu中有这样的工具吗？这会为我节省大量的时间去挖掘和找出旧文件.
浏览 0提问于2011-03-08得票数 3
3回答
问题：
我是Hbase的新手，我遇到了一个需要连接两个表的情况。
假设我有Employee表和Department表，这两个表都是在Hbase中创建的。通过阅读操作中的Hbase，我了解到我们不能在Hbase中连接表。
解决方案：
我发现了一个解决方案，通过使用Hbase类和接口编写MapReduce代码，我们可以实现这一任务。
另外，如果有人可以帮助我编码，这将是非常有帮助的
浏览 0提问于2014-08-31得票数 5
回答已采纳
我想使用distcp备份hbase文件。然后将hbase指向新复制的文件，并使用存储的表。
我意识到有一些工具是推荐给这份工作的。但是，我想知道在复制文件以使hbase识别复制的文件之后需要做什么。
例如，我想启动hbase shell并从新复制的文件中扫描存储的表。
浏览 2提问于2014-03-26得票数 2
2回答
问题：
我正在尝试使用文档中的示例将数据从文本文件导入到HBase数据库。
配置
HBase版本：hbase-0.94.4。
我的安装是Standalone (非分布式或伪分布式)。
重现错误
最初，它在HDFS上创建StoreFiles，并创建一个名称为datatsv的空表，使用：
HADOOP_CLASSPATH=`${HBASE_HOME}/bin/hbase classpath` ${HADOOP_HOME}/bin/hadoop \
jar /usr/local/hbase/hbase-0.94.4.jar importtsv \
-Dimporttsv.columns=HBASE_
浏览 1提问于2013-01-20得票数 0
回答已采纳
在今天的一集中，hbase让我不知所措，我们遇到了一个问题，hbase的主控程序启动，然后很快就会死亡。我的主日志是这样的：
2014-06-20 12:52:40,469 FATAL [master:hdev01:60000] master.HMaster: Master serve
r abort: loaded coprocessors are: []
2014-06-20 12:52:40,470 FATAL [master:hdev01:60000] master.HMaster: Unhandled ex
ception. Starting shutdown.
org.apache
浏览 10提问于2014-06-21得票数 5
回答已采纳
1回答
嗨，我在大数据平台上有个问题。我们可以使用任何GUI Sql工具通过putty或odbc连接中的直线(直线命令)连接到蜂箱。但我们如何才能连接到Hbase呢？根据我的理解，我们有Shell格式或Java格式的Hbase。但是我们如何连接到Hbase呢？
浏览 1提问于2020-05-12得票数 1
1回答
我正在寻找SCA的ecore图，我不想从头开始。
我得到的唯一部分信息是这张图。
感谢您的回答，即使它们是否定的
附言:如果我需要的话，我会试着上传我的ecore。
浏览 5提问于2012-03-20得票数 0
回答已采纳
2回答
当我想在上创建索引时，在sqlline中有超过1亿行的大型hbase表，几分钟后我得到了一个异常。我不知道如何解决这个问题。我的env是：
hbase(主要)：001:0>版本
1.0.0-cdh5.4.2，rUnknown，Tue，5月19日17:07:29
凤凰城
连接:菲尼克斯(4.6版)
驱动程序: PhoenixEmbeddedDriver (版本4.6)
自动提交状态:真
异常信息看起来如下：
15/12/11 14:20:08 WARN client.ScannerCallable: Ignore, probably already closed
org.a
浏览 6提问于2015-12-11得票数 0
当我试图创建一个新的表时，我遇到了两个被困的hbase程序。我想当时区域服务器可能出了点问题。
现在，我发现一个标记为“等待”的父过程，它的子过程标记为"WAITING_TIMEOUT“。
我想中止/杀死这两个过程，但我不知道如何做，似乎hbase shell的“杀死”操作在过程上不支持。
我的hbase版本是2.0.2，在纱线上运行。
我试图重新启动hbase，但程序仍然在那里，并仍然停滞不前。
父过程
id:
54206
parent:
Empty, no parent
state:
WAITING
type:
ServerCrashProcedure server=sla
浏览 0提问于2019-05-27得票数 1
我是Hadoop新手，最近安装了Hive和HBase。
我在Hive中创建了几个表，查询以MapReduce的方式运行。而且，当我在HBase中说'get‘时，它不是在MapReduce中运行的，这就是为什么我认为它具有很高的延迟。
我在这里几乎没有什么疑问。
如果我有一个需要处理实时流数据的应用程序，我应该使用什么- Hive或HBase
我是否可以使用HBase选项安装MapReduce，以便HBase中的get命令以MapReduce方式运行？
提前感谢
浏览 0提问于2014-05-31得票数 0
回答已采纳
我们在amazon EMR上有一个默认配置的hadoop+hbase集群，因此mapred.child.tmp和hbase.tmp.dir都指向/tmp。我们的集群已经运行了一段时间，与实际/hbase数据的70 to相比，现在的/tmp是500 to。
这种差异似乎太大了，我们是不是应该周期性地删除一些/tmp数据？
浏览 1提问于2012-09-17得票数 1
回答已采纳
有没有办法(最好用GUI)在xx分钟后挂起我的电脑？我正在使用Ubuntu伙伴16.04 LTS，并尝试了一切，包括电源管理。
谢谢你，菲利普
浏览 0提问于2016-05-17得票数 9
回答已采纳
我是凤凰城的新手
我已经将我的Apache凤凰连接到了HBase，所有这些都进行得很顺利，但是我需要在表上执行一些java操作，所以您能帮我修复如何将我的凤凰连接到eclipse，这样我就可以执行从菲尼克斯到HBase表的操作，并在HBase中更新那个表。
请帮助我这样做
浏览 3提问于2014-12-25得票数 0
回答已采纳
trafodion@cdh6脚本$ sqlci Apache Trafodion会话接口2.0.0版权(c) 2015-2016 Apache软件基金会
初始化trafodion；* ERROR1398错误706发生在访问hbase子系统时。修复该错误并确保hbase已启动并运行。错误详细信息: java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration java.lang.NoClassDefFoundError
我相信hbase运行良好，trafodion已经成功启动！
浏览 2提问于2016-07-05得票数 0
1回答
有些软件仅由根终端运行。
、、、
在这里，我面临着这种奇怪的情况，像gparted、furiusisomount和Rstudio这样的程序从来不会通过点击应用程序菜单中的图标或者以正常用户的身份使用终端来运行。但他们只会在sudo终端上工作。
我遇到以下错误：
Gtk-WARNING **: Locale not supported by C library.
Using the fallback 'C' locale.
Traceback (most recent call last):
File "/usr/share/furiusisomount/main.py", line
浏览 0提问于2014-02-18得票数 4
我是Apache ofbiz的新手。我阅读了本教程，并部署了Apache的默认版本。我确实理解Apache中的数据库默认是Derby。在启动ofbiz时，我可以看到许多表正在被创建。但是，我无法在Apache中查看模式。我需要关于查看数据库模式的指导。
浏览 2提问于2015-05-11得票数 0
回答已采纳
5回答
我试图通过运行HBase类来启动HMaster，但是我得到了以下错误：
java.lang.RuntimeException: Failed suppression of fs shutdown hook: Thread[Thread-8,5,main]
at org.apache.hadoop.hbase.regionserver.ShutdownHook.suppressHdfsShutdownHook(ShutdownHook.java:196)
at org.apache.hadoop.hbase.regionserver.ShutdownHook.install(Sh
浏览 6提问于2013-10-25得票数 3
3回答
简而言之
我有一个程序，随着时间的推移，它会逐渐使用越来越多的内存。我正在使用jmap和jhat来尝试诊断它，但仍然不是很好。
背景
该程序是一个长期运行的服务器，由hbase数据存储支持，为一堆其他东西提供省钱的服务。然而，在运行几天后，它最终会达到分配的堆限制，并来回颠簸，几乎所有的时间都花在垃圾收集上。它似乎将引用保存在某个地方的大量数据中
到目前为止，我所做的
在摆弄了jstat和jconsole之后，我最终用jmap获取了正在运行的进程的堆，并通过jhat运行它，简单的数字加起来根本不会接近内存利用率
jmap -F -dump:live,format=b,file=heap.dum
浏览 3提问于2010-12-21得票数 8
我正在从事一个在Hbase中包含1TB数据的项目。为了备份起见，我读到了有关快照的文章。
hbase快照位于集群上，我希望导出到不同的集群，并且我将得到
引起: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.snapshot.CorruptedSnapshotException)：org.apache.hadoop.hbase.snapshot.CorruptedSnapshotException：
那么，在我的导出中还需要包括哪些其他文件呢？
是否可以通过winscp将快照目
浏览 2提问于2017-07-30得票数 1
回答已采纳
我们使用RegexStringComparator，但不确定是否使用像1|2|3这样的正则表达式过滤以字节形式写入hbase的值。
有人能证实这招有效吗？文件什么都没说。
编辑：我想我的问题不够清楚。我知道我可以使用RegexStringComparator作为Hbase过滤器，并将值作为字符串写入Hbase，例如：
行键：myrow123
列：c:name, timestamp=1234567891234, value=Irene
但是，我也可以将它与写入Hbase的值一起使用为字节，例如：
行键：\x6d\x79\x72\x6f\x31\x32\x33
列：c:\x6e\x61\x6d\x
浏览 6提问于2016-10-07得票数 0
我想问那些有使用Turbo C++ 3.0编码经验的人这个问题。
我正在尝试用它做一个文本用户界面控制台应用程序，我看到Turbo C++ 3有一个在你的程序中链接turbo vision的选项。
使用: Options，->，Linker，->，Libraries，->，Check，Turbo Vision。
知道我的问题是，我如何开始在我的程序中使用它？我试图包含，但无济于事，或者也没有包含头部。
注意:如果你知道用文本用户界面开发C++/C控制台应用程序的其他方法，那么请随时回答。
谢谢!
编辑:请不要评论不使用Turbo C++，因为它是旧的。我只是想为我们的项目创建
浏览 3提问于2012-03-09得票数 0
回答已采纳
1回答
如何使用Elasticsearch来索引存储在HDFS中的文档？如果记录已经存储为JSON格式的字符串，会有帮助吗？如果我可以在HBase中使用Elasticsearch (以更合适的为准)，我也有HBase表中的数据。如果您能给予指导，我们将不胜感激。
提前感谢
浏览 2提问于2014-03-11得票数 0
我正在努力寻找最好的组件来构建类似于Splunk的组件，以便从计算网格中的大量服务器上聚合日志。另外，它应该被分发，因为我每天都有很多日志，没有一台机器能够存储日志。
我特别感兴趣的东西将与Ruby工作，并将在Windows和最新的Solaris (是的，我有一个动物园)。
我认为建筑是：
日志爬虫(Ruby脚本)。
分布式日志存储
分布式搜索引擎
重量轻的前端。
日志爬虫和分布式搜索引擎没有问题-日志将由Ruby解析，ElasticSearch将用于索引日志消息。前端也很容易选择-辛纳屈。
我的主要问题是分布式日志存储。我看了MongoDB，CouchDB，HDFS，
浏览 4提问于2010-06-22得票数 0
回答已采纳
我已经写了一个脚本来计算每2小时有多少条记录被插入到3个单独的HBase表中。我知道它是劣质的，但它工作得很好，我检索到了想要的结果...但是，每次在循环中工作时，我都必须调用HBase外壳。
有没有办法改进我的代码，这样我就不需要这样做来加快速度了？
#!/bin/bash
declare -a hbaseTables=("table1" "table2" "table3");
for i in "${hbaseTables[@]}"
do
echo $i >> results.txt
浏览 1提问于2015-05-18得票数 2
2回答
我正在尝试让一个使用CDH3 3的Hadoop和HBase的sbt项目进行下去。我试图使用一个项目/build/Project.scala文件来声明对HBase和Hadoop的依赖关系。(我承认我对sbt，maven和常春藤的把握有点弱。如果我说或做了什么蠢事，请原谅我。)
随着Hadoop的依赖，一切都进行得很顺利。添加HBase依赖关系会导致依赖于 0.2.0，而似乎没有回购，或者从这个听起来是这样的
所以，说真的，我有两个问题: 1.老实说，我不想依赖于Thrift，因为我不想使用HBase的Thrift接口。有没有办法让sbt跳过它? 2.有什么更好的方法来设置它吗？我应该直接将HBa
浏览 4提问于2011-06-06得票数 2
回答已采纳
我在使用HBase存储用户的键/值信息的项目上工作。我们正在重新设计我们正在使用的HBase模式。正在讨论的两个备选方案是：
使用HBase列限定符作为键的名称。这将使行宽，但非常稀疏。
将所有数据转储到一个列中，并使用Avro或Thrift对其进行序列化。
这两种方法的设计权衡是什么？一个比另一个好吗？它们是否有任何理由不使用Avro或Th深层存储数据？
浏览 0提问于2013-01-29得票数 12
回答已采纳
1回答
我尝试使用HBase导出工具将表传输到HDFS。我尝试使用hadoop dfs -text命令来查看文件的内容集合。然而，我得到了一个致命的错误：
java.lang.RuntimeException: java.io.IOException: WritableName can't load class: org.apache.hadoop.hbase.io.ImmutableBytesWritable
我需要集成任何配置才能在我的hadoop运行时中包含类吗？
浏览 0提问于2013-05-01得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
