3回答
因为我想在HDFS上存储数据，所以需要访问HBase，那么我如何使用Java连接到HBase。
请提个建议。
谢谢。
浏览 3提问于2013-03-25得票数 2
回答已采纳
1回答
我的6节点Hbase集群有以下硬件配置(1主-5从)
每个节点的配置
2.4 CPU，48核Intel CPU
256 RAM
1 1Gb/ps网络连接
30个SSD磁盘(JBOD设置)
操作系统: RHEL 6.6
Hbase版本:1.2.0
CDH分布: 5.7.0
我在Hbase中调整了以下参数：
hbase.client.write.buffer: 64MB
hbase.regionserver.handler.count: 64
master_region_java_heapsize: 125GB
hbase.client.scanner.caching: 10000
浏览 3提问于2016-06-18得票数 0
2回答
我正在尝试将hbase和php模块组合的遗留系统拆分为两个独立的容器，并使用以下docker-compose文件：
version: '2'
services:
php:
image: my-legacy-php
volumes:
- ~/workspace/php:/workspace/php
ports:
- "80:80"
links:
- hbase
hbase:
image: dajobe/hbase
hostname: hbase-docker
por
浏览 1提问于2016-11-19得票数 2
我已经转换了我的图像并以字节的形式存储在HBase上。现在我想要SpotFire从hbase读取图像(作为字节)并显示它。我知道我可以使用Phoenix连接器从SpotFire连接到HBase，但如何在SpotFire中渲染图像(在HBase中存储为字节)？
浏览 1提问于2017-05-08得票数 2
我有两个版本的python脚本，它在while循环中用1000行扫描hbase中的表。第一次使用愉快基础，如在
while variable:
for key, data in hbase.table(tablename).scan(row_start=new_key, batch_size=1000, limit=1000):
print key
new_key = key
在中使用hbase节俭接口的第二种
scanner_id = hbase.scannerOpenWithStop(tablename, '', '', []
浏览 0提问于2015-06-19得票数 0
1回答
我是Hadoop和hbase的新手。有人能帮助我使用扫描和过滤命令吗？
我试图使用过滤器从hbase中提取某一特定药物的一系列行的记录。当我给出这个外壳命令时：scan 'Mytable', {COLUMNS => ['abc'], FILTER => "avil",STARTROW => "1100",STOPROW => "1121"}
它向我显示了一个错误：Incorrect Filter String
我正在尝试使用这个命令作为参考：
hbase> scan 't1&
浏览 0提问于2014-08-21得票数 3
回答已采纳
2回答
在我的项目中，我们使用Hadoop 2、Spark、Scala。Scala是编程语言，Spark在这里用于分析。我们同时使用Hive和HBase。我可以使用HDFS访问Hive的所有细节，如文件等。但我的困惑是-
当我能够使用Hive**，执行所有任务时，为什么需要** HBase 来存储数据。这不是一种开销吗？
HIVE 和 HBase**?**的功能是什么？
如果我们只使用Hive，那么问题应该是什么呢？
有谁能告诉我。
浏览 2提问于2016-12-29得票数 4
回答已采纳
2回答
将Kafka中的流数据“导入”到HBase中的最佳实践是什么？
使用案例如下:将车辆传感器数据流式传输到Kafka。然后，必须对这些传感器数据进行转换(即，将protobuf反序列化为人类可读的数据)，并将其存储在HBase中。
1)您推荐哪个工具集(如Kafka --> Flume --> HBase、Kafka --> Storm --> HBase、Kafka --> Spark Streaming --> HBase、Kafka --> HBase)
2)哪里是进行protobuf反序列化的最佳位置(例如，在Flume中使用拦截器)？
谢谢您一
浏览 1提问于2015-08-18得票数 6
我读过很多关于hbase的特性，如持续性，可伸缩性，容错性，随机书写等等，但是HDFS是否有提供给hbase的特性呢？
浏览 3提问于2014-08-29得票数 0
回答已采纳
我正在尝试理解关于逻辑数据模型与物理数据存储的Hbase架构。我对HFile的创建有一点困惑。如果我们有一个有2列的列族，Hbase是创建2个HFiles还是1个呢？ 下面是我正在查看的图表，下面的示例显示了每个cf:col从逻辑到物理的映射。请帮我澄清这个困惑 https://mapr.com/blog/hbase-and-mapr-db-designed-distribution-scale-and-speed/assets/blogimages/Logical-vs-physical-storage.png
浏览 16提问于2019-04-03得票数 0
当我通过菲尼克斯shell创建表时，可以通过命令list在hbase中检测到它，但在菲尼克斯中没有发现相同的情况。
除了HBase默认表之外，菲尼克斯只检测在菲尼克斯shell中创建的表。
我怎样才能解决这个问题？
浏览 4提问于2016-04-30得票数 0
回答已采纳
我正在考虑在我的应用程序启动时创建一个HBase表，并在我的应用程序运行时保持它的打开状态。我的申请可能会无限期运行。
如果我从未关闭HBase表，会发生什么情况？
在重新初始化连接之前，是否有最长的时间可以打开/空闲？
如果系统崩溃，连接是如何关闭的？
我有HBase的权威指南，但我没有找到我正在寻找的信息在那里。如果有任何在线参考，那么请提供他们。
浏览 3提问于2013-07-30得票数 3
我正在运行我编写的用于测试HBase、lockRow()和unlockRow()方法的示例代码。示例代码如下：
HTable table = new HTable(config, "test");
RowLock rowLock = table.lockRow(Bytes.toBytes(row));
System.out.println("Obtained rowlock on " + row + "\nRowLock: " + rowLock);
Put p = new Put(Bytes.toBytes(row));
p.add(Byte
浏览 3提问于2014-02-28得票数 2
回答已采纳
我试图使用java客户端将数据加载到hbase中(使用Cloudera-quickstart-vm-5.5.0.0-vmware player)。
代码：
package com.hbase.stock.record;
import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apac
浏览 3提问于2016-04-23得票数 0
回答已采纳
1回答
我看到了一个存储HBase数据的外部Hive表：
CREATE EXTERNAL TABLE IF NOT EXISTS ods.demo_table(
rowkey String COMMENT 'rowkey of hbase',
....
)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROPERTIES ("hbase.columns.mapping" = "info:...") TBLPROPER
浏览 1提问于2018-07-27得票数 0
回答已采纳
1回答
这个异常是在HBase中引发的，当有大量的集群写入时：
WARN org.apache.hadoop.ipc.HBaseServer: IPC Server listener on 60020: readAndProcess threw exception java.io.IOException: Connection reset by peer. Count of bytes read: 0
java.io.IOException: Connection reset by peer
at sun.nio.ch.FileDispatcher.read0(Native Method)
浏览 0提问于2013-09-11得票数 1
我用c++写了一个爬虫，我正在寻找一个分布式数据存储，我找到了hbase hypertable
这两个都是Big table的实现，我刚刚回顾了hypertable。因为它是在hadoop中实现的，所以and..hbase使用最广泛，我的问题是，我们需要hadoop...is的方式，如果我在hadoop上运行hypertable有什么好处吗？
浏览 0提问于2011-02-28得票数 5
我将用户数据存储在HBase中，我有c#客户端，它使用HBase REST API将数据存储在HBase表中。有可能通过多个线程更新用户数据。如何更新表中的行，以及如何对行应用锁定系统。注意：-我使用的是HBase REST API。
浏览 1提问于2012-12-13得票数 0
1回答
我有一个推特爬虫，通过HBase本地java客户端集成到HBase。当爬行过程开始时，tweet中的每条推文都将被发送到HBase表。我的问题是，集成Crawler和HBase是最佳实践吗？我担心在抓取过程中继续将tweet保存到表中时的性能。(我之所以这样做，是因为在将数据从crawler插入到HBase之后，这些tweet将被Solr索引)
浏览 0提问于2015-06-23得票数 0
我最近为hadoop集群配置了两台机器(在ubuntu上)。到目前为止，它工作得很好。但是当我尝试在上面的hadoop集群上配置hbase时，它显示错误。这是我所做的，
我有两台机器。192.168.1.110 Hadoop主机192.168.1.111从Hadoop
conf/hbase-env.sh
export JAVA_HOME=/usr/lib/jvm/java-6-sun-1.6.0.22 export HBASE_CLASSPATH=/home/hadoop/hadoop-0.20.2/conf export HBASE_MANAGES_ZK=true
hbase-site.xm
浏览 1提问于2011-03-11得票数 6
5回答
我已经在ubuntu 12.04上安装了hadoop单节点。现在，我正在尝试在其上安装hbase (0.94.18版)。但是我得到了以下错误(尽管我已经将其解压缩到/usr/local/hbase中)：
Error: Could not find or load main class org.apache.hadoop.hbase.util.HBaseConfTool
Error: Could not find or load main class org.apache.hadoop.hbase.zookeeper.ZKServerTool
starting maste
浏览 1提问于2014-05-11得票数 3
1回答
集群配置：
CDH-6.2.1Spark：Hadoop： 2.4.0Hbase: 2.0
我所做的:通过星火读取HBase数据
当我使用IntelliJ和local模式时，一切正常，但是当我将模式更改为spark-submit --master yarn时，会发生以下堆栈跟踪：
20/05/20 11:00:46 ERROR mapreduce.TableInputFormat: java.io.IOException: java.lang.reflect.InvocationTargetException
at org.apache.hadoop.hbase.client.Conne
浏览 1提问于2020-05-20得票数 3
回答已采纳
2回答
我对hadoop还比较陌生，我通过做一些示例练习来了解它，但我有一个关于如何在实践中使用它的问题。许多应用程序似乎都是面向批处理的(例如日志文件数据)，但我不确定hbase如何适应这里？
将日志文件数据存储在hbase中，然后对其进行处理并将其输出到其他存储格式是否很常见？将原始日志文件传递到hadoop，然后将输出存储在hbase中是不是更常见？我想我真正的问题是hbase通常用作hadoop的输入或输出，还是两者兼而有之？
浏览 0提问于2012-04-06得票数 2
回答已采纳
2回答
我使用cloudera CDH 5.8.0创建了一个包含一个主节点和三个从节点的集群。经过一些配置工作后，我得到了健康的所有服务，但只有一个: HBase。重新启动几分钟后，它就会变得不健康。
Cloudera Manager显示的错误是："Bad : Master summary: This health test is bad the Service Monitor找不到active Master“。我检查了服务监视器日志，发现了以下警告：
(7 skipped) Exception in doWork for task: hbase_HBASE_SERVICE_STATE_TAS
浏览 2提问于2016-12-15得票数 3
sentry-provider.ini
[groups]
# Assigns each Hadoop group to its set of roles
engineer = engineer_role
ops = ops_role
dev_ops = engineer_role, ops_role
hbase_admin = hbase_admin_role
[roles]
# The following grants all access to source_code.
# "collection = source_code" can also be used as sy
浏览 3提问于2016-09-23得票数 0
回答已采纳
1回答
我在CDH集群5.7.0中运行了HBase。运行了几个月之后，hbase服务停止了，现在不可能启动HBase主服务器(1个主服务器和4个区域服务器)。
当我试图在某个时候启动它时，机器会挂起，我在主日志中看到的最后一件事是：
2016-10-24 12:17:15,150 INFO org.apache.hadoop.hbase.util.FSHDFSUtils: Recover lease on dfs file hdfs://namenode:8020/hbase/MasterProcWALs/state-00000000000000005528.log
2016-10-24 12:17:
浏览 5提问于2016-10-24得票数 1
回答已采纳
所有人
我是Hadoop的新手，我对Hbase的加入有一些问题。
我有两个集群，A组的Hbase有员工表，B组的Hbase有部门表。
那么，如何加入开发人员和部门呢？
我需要安装蜂巢吗？
浏览 4提问于2016-03-28得票数 1
回答已采纳
1回答
我是hbase的新手。我在Microsoft Azure上使用的是HBase 1.1.2版。我有如下所示的数据
id num1 rating
1 254 2
2 40 3
3 83 1
4 120 1
5 91 5
6 101 2
7 17 1
8 10 2
9 11 3
10 31 1
我尝试创建一个表，其中包含表单的两个列族
create 'table1', 'family1', &#
浏览 0提问于2017-05-15得票数 0
从oozie调用importtsv的最佳方式是什么？这是我想通过oozie运行的：
hbase org.apache.hadoop.hbase.mapreduce.ImportTsv -Dimporttsv.separator=',' -Dimporttsv.columns="HBASE_ROW_KEY,cf:name" nameTab hdfs://xyz.com:8020/user/me/name.csv
我是否必须将其放在脚本中，如果是，如何调用hbase，以及要添加的库是什么。菜鸟，请帮帮忙。
浏览 3提问于2016-06-22得票数 1
1回答
我试图强制拆分一个区域，但收到以下错误。
ERROR: org.apache.hadoop.hbase.DoNotRetryIOException: 3dd9ec2b32c98131b39fbfa8266881f9 NOT splittable
at org.apache.hadoop.hbase.master.assignment.SplitTableRegionProcedure.checkSplitt
浏览 5提问于2020-05-25得票数 3
当我试图以编程方式从spark/scala文件执行hbase操作时
观察我们刚刚从spark 1.6版本迁移到2.3版本，HBASE1.2版本在这两种情况下都是相同的。但是现在我们在做hbase分布式扫描操作时面临着这个问题。
获取误差
Exception in thread "main" org.apache.hadoop.hbase.DoNotRetryIOException: /0.0.0.0:60020 is unable to read call parameter from client ; java.lang.UnsupportedOperationExcepti
浏览 0提问于2018-11-12得票数 0
HBase有自己的缓存系统，在从HDFS获取数据之前，它将从缓存中搜索读取请求。但是它的缓存性能可能会受到JVM内存大小的影响，这就是为什么我想使用Redis作为HBase的缓存的原因。
浏览 8提问于2017-02-23得票数 0
最近，我遇到了starbase模块，因为我的python脚本与hbase的连接。
我会给你简要说明我所面临的问题，然后一步一步地分解它，给你一个清晰的形象。
我的hbase表中有一些名为“dummy_ table”的数据。早些时候，这个表中的键都是由\x00填充分隔的字符串。以下是一个例子：-
00:00:00:00:00:00\x001441767600\x001\x0040.0.2.1\x00
现在，我将解释这些领域的实际情况：-
00:00:00:00:00:00 - This is the mac address
1441767600 - This is the time in epo
浏览 3提问于2015-10-16得票数 1
回答已采纳
当我在IDE Eclipse中编写java代码来访问hbase时，消息"java.net.UnknownHostException“总是被shown.But hbase外壳运行得很好。我以伪分发模式在单个linux节点上安装hadoop和hbase。我的主机名是yzd。下面是/etc/hosts和hbase-site.xml：
/etc/hosts:
127.0.0.1 localhost yzd
hbase-site.xml:
<property>
<name>hbase.rootdir</name>
浏览 0提问于2013-11-06得票数 0
我总共有10个节点。3个节点运行Zookeeper，其余7个节点运行HDFS和Hbase。而且Hbase已经存储了很多数据。我错误地初始化了Zookeeper节点的(I'm using Cloudera, by mistake clicked the Initialize Button)。我想知道这3个Zookeeper节点是否丢失了可能是Hbase mata数据的持久数据。或者说，Hbase将元数据存储在Hmaster中，而Zookeeper只存储一些内存数据。
浏览 4提问于2016-07-09得票数 1
我是Hbase的新手，我只想了解Hbase的写操作。如果多个客户端在同一个表中写入，那么Hbase如何保持对物理文件的顺序写入。
Hbase将数据存储在哪里(我认为是在HDFS中)？
我们可以在HDFS之外存储Hbase数据吗？
浏览 2提问于2013-04-12得票数 0
回答已采纳
我试着用HbaseTestingUtility测试我的Hbase代码。每次我使用下面的代码片段启动我的迷你集群时，我都会得到一个异常。
public void startCluster()
{
File workingDirectory = new File("./");
Configuration conf = new Configuration();
System.setProperty("test.build.data", workingDirectory.getAbsolutePath())
浏览 4提问于2013-09-10得票数 3
1回答
我是HBASE新手，我正尝试从HDFS将数据加载到HBASE中，但每次运行MR时都无法执行此操作
错误“Exception in thread "main”java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration“
所有的类文件都在那里我不知道哪里出了问题.To运行MR首先我编译了源码并将hadoop和hbase库包含在类路径中然后我生成了jar并运行了它，给出了同样的错误。
"hbase HBaseTemperatureImporter input“，然后它会给出错误"java
浏览 3提问于2012-02-27得票数 0
回答已采纳
1回答
我在我的窗口中配置了Hadoop和same(这是我的本地的)，我在vm (同一台机器)中安装了cloudera，其中包含了hbase。
我试图使用火花流来提取数据，并将其放入到虚拟机中的hbase中。
有可能这样做吗？
我的尝试：
包hbase
import org.apache.hadoop.hbase.HBaseConfiguration
import org.apache.hadoop.hbase.client.{ConnectionFactory,HBaseAdmin,HTable,Put,Get}
object Connect {
def main(args: Array[
浏览 0提问于2018-08-08得票数 1
回答已采纳
我是HBASE和HADOOP的新手，需要可用的兼容版本的hbase和hadoop来运行我的实验。
at "“的当前稳定版本是hbase-0.94.1。有没有人能告诉我应该使用哪个版本的hadoop，这样就不会有兼容性问题，也不会有未来的数据丢失。
请推荐当前在线提供的hadoop和hbase版本。
下面是我用来下载这些版本的网站
hadoop( ) (hbase)
浏览 0提问于2012-09-09得票数 8
亚马逊的弹性MapReduce工具似乎只支持HBase v0.92.x和v0.94.x。
似乎已经过时了，在最新的版本标签emr-4.0.0上没有关于HBase的信息。
使用这个，我能够拼凑出一种方法在节点上安装另一个版本的HBase，但最终还是失败了。
在多次尝试Java SDK以提供更好版本的EMR之后，我问：
是否可以将电子病历配置为使用更新版本的HBase (例如0.98.x和更高版本？)
浏览 0提问于2015-08-25得票数 1
1回答
请告诉我怎么了，我刚开始和hbase合作。在为hbase创建java应用程序中的区域时，会出现以下错误。
Caused by: org.apache.hadoop.hbase.ipc.RemoteWithExtrasException(org.apache.hadoop.hbase.client.DoNotRetryRegionException): org.apache.hadoop.hbase.client.DoNotRetryRegionException: bc3ec95b447809887e3c198afe4d1084 is not OPEN; regionState={bc3ec9
浏览 5提问于2022-04-29得票数 0
回答已采纳
1回答
我正在为让我的HBase外壳运行而奋斗。它将我抛出主题行中的上述异常。我已经检查过hbase-site.xml与hadoop完全匹配。
请帮帮忙。我挣扎了两天，有一个项目到期。我正在附加hadoop和hbase的两个xml文件。
hbase-site.xml
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://localhost:54310/hbase</value>
浏览 5提问于2015-03-20得票数 1
回答已采纳
我试图用HBase表('test_table)作为源创建Hive外部表，HBase表是在HBase名称空间‘test_命名空间’下创建的。在应用程序的其他部分中，我使用以下syntx访问表
test_namespace:test_table或hbase://test_hbase:test_table
按照相同的方法，我创建了一个hive脚本
CREATE EXTERNAL TABLE IF NOT EXISTS TEST_INDIVIDUAL(
key string,
test string,
photo string,
location s
浏览 1提问于2016-06-16得票数 0
我有一个CDH为5.8.4的集群。我运行在一个spark streaming应用程序中，它通过使用cloudera spark-hbase连接器，即HBaseContext，从HBase读写数据。当我启动应用程序时，我将主体和kinit提供给spark-submit脚本。我发现应用程序在7天后崩溃，并显示与HBase上下文相关的票证kerberos过期错误。下面是executors日志中的错误：
ERROR executor.Executor: Exception in task 0.0 in stage 544265.0 (TID 1149098)
org.apache.hadoop.hba
浏览 0提问于2017-10-27得票数 1
将Spark Streaming中接收的数据与HBase中的现有数据进行比较的最佳方式是什么？ 我们从kafka接收数据作为DStream，在将其写到HBase之前，我们必须根据从kafka接收到的密钥扫描HBase中的数据，进行一些计算(基于每个密钥的新数据和旧数据)，然后写到HBase。 因此，如果我收到record (key，value_new)，我必须从HBase (key，value_old)获取，这样我就可以比较value_new和value_old。 所以逻辑是： 来自Kafka的数据流-> Query HBase by Dstream keys -> Some c
浏览 32提问于2021-02-09得票数 1
回答已采纳
2回答
我现在有Hadoop-2，猪，蜂箱和HBASE。我有个输入数据。我已经在HDFS中加载了这些数据。我想在这个环境中创建暂存数据。
我的疑问是-
在哪个BigData组件中，我应该创建暂存表(Pig/HIVE/HBASE)；这将根据条件输入数据？稍后，我们可能希望运行具有复杂逻辑的MapReduce作业。
请协助
浏览 3提问于2015-07-15得票数 0
回答已采纳
1回答
我对Hbase的概念非常陌生。据我所知，HBase的底层文件系统仅限于HDFS。
我只是想了解一下，如果在一个集群中，我已经有一些HDFS中的数据。我尝试在HBase中导入它(或者使用Pig/Hive脚本)，它会以HBase支持的形式( Hbase的底层文件系统是HDFS)在HDFS中创建相同数据的另一个副本吗？
或者它将创建对相同HDFS数据的引用？
浏览 4提问于2015-02-01得票数 0
回答已采纳
我在下面的链接中看到，HBase不支持更新，其中说HBase是一个“仅附加”的存储。
另外，我知道可以使用put命令更新HBase中现有的单元格值，只需遵循相同的语法并提到新的值。
例如，可以如下所示更新“波士顿”到“芝加哥”的“城市”列的值：
put 'emp','row1','personal:city','Chicago'
当上一行是：
row1 column = personal:city, timestamp = 1418275907, value = Boston
在HBase中，可以为列族启用版本控制，并具有多个
浏览 0提问于2020-10-29得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
