我将用户数据存储在HBase中，我有c#客户端，它使用HBase REST API将数据存储在HBase表中。有可能通过多个线程更新用户数据。如何更新表中的行，以及如何对行应用锁定系统。注意：-我使用的是HBase REST API。
浏览 1提问于2012-12-13得票数 0
1回答
我有一个推特爬虫，通过HBase本地java客户端集成到HBase。当爬行过程开始时，tweet中的每条推文都将被发送到HBase表。我的问题是，集成Crawler和HBase是最佳实践吗？我担心在抓取过程中继续将tweet保存到表中时的性能。(我之所以这样做，是因为在将数据从crawler插入到HBase之后，这些tweet将被Solr索引)
浏览 0提问于2015-06-23得票数 0
我试图用HBase表('test_table)作为源创建Hive外部表，HBase表是在HBase名称空间‘test_命名空间’下创建的。在应用程序的其他部分中，我使用以下syntx访问表
test_namespace:test_table或hbase://test_hbase:test_table
按照相同的方法，我创建了一个hive脚本
CREATE EXTERNAL TABLE IF NOT EXISTS TEST_INDIVIDUAL(
key string,
test string,
photo string,
location s
浏览 1提问于2016-06-16得票数 0
5回答
有没有什么办法我们可以创建一个Hbase表作为hbase查询的输出？假设我有一个巨大的hbase表，然后我使用filter查询hbase表。我想把结果存储回Hbase表中。有可能吗？
浏览 4提问于2015-08-29得票数 0
1回答
我是hbase的新手。我在Microsoft Azure上使用的是HBase 1.1.2版。我有如下所示的数据
id num1 rating
1 254 2
2 40 3
3 83 1
4 120 1
5 91 5
6 101 2
7 17 1
8 10 2
9 11 3
10 31 1
我尝试创建一个表，其中包含表单的两个列族
create 'table1', 'family1', &#
浏览 0提问于2017-05-15得票数 0
2回答
我刚开始接触hbase。因此，我创建了一个表，并在该表中填充了一些数据。但是重新启动计算机后，所有的数据都丢失了。甚至在使用stop-hbase.sh停止hbase时也会发生这种情况。hbase安装:伪分布式hbase-site.xml：
hbase.rootdir hdfs://本地主机:9000/hbase
浏览 0提问于2017-11-07得票数 2
1回答
嗨，出于开发和测试目的，我使用本地文件系统安装了Hbase 0.89 (oct版本)。我使用hbase shell创建了一些表和行。无论何时我重启hbase，都没有可用的数据/表。对此有什么建议吗？
浏览 0提问于2010-12-15得票数 0
回答已采纳
1回答
在HDP集群上，我正在尝试创建和集成Hive表和现有的Hbase表。它创建了蜂巢表。但是，当我试图查询hive表时，它会抛出以下异常，特别是当列数超过200列时。
我检查了两个hbase中的列#& hive是相同的。没有得到正确的解决方案来调试它。
hive> select * from hbase_hive.lead;
FAILED: RuntimeException MetaException(message:org.apache.hadoop.hive.serde2.SerDeException
org.apache.hadoop.hive.hbase.HBaseSer
浏览 1提问于2016-09-19得票数 2
回答已采纳
1回答
我遇到了一种使用Java截断HBase表的意外行为。详细地说，我正在做以下操作：
禁用表
截断表
启用表
与这些操作对应的代码如下：
Configuration conf = HBaseConfiguration.create();
// ...
// Setting properly the configuration information
// ...
try (HBaseAdmin admin = new HBaseAdmin(conf)) {
if (admin.isTableEnabled(TABLE_NAME)) {
ad
浏览 2提问于2016-09-12得票数 2
回答已采纳
我确实有现有的hbase表&为了支持SQL，我正在尝试是否可以创建apache phoenix表。 我想知道如果我在现有的hbase表上创建phoenix表，它是否复制(或复制) hbase表中存在的数据，或者phoenix表只是链接到hbase中存在的现有数据？ 我的phoenix版本低于4.12.0，所以this error仍然适用于我的版本&因此不能在现有的hbase表上创建视图。
浏览 30提问于2020-01-11得票数 0
1回答
任何人直接在HBase表上使用SparkSQL，就像在Hive表上使用SparkSQL一样。我是spark.Please新手，指导我如何连接hbase和spark.How来查询hbase表。
浏览 22提问于2016-09-16得票数 7
回答已采纳
1回答
我在Hbase中有一个表，比方说"tbl“，我想使用Hive查询它。因此，我将表映射为单元，如下所示：
CREATE EXTERNAL TABLE tbl(id string, data map<string,string>)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'
WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,data:")
TBLPROPERTIES("hbase.tabl
浏览 1提问于2015-05-06得票数 9
1回答
似乎没有合适的资源或文档或书籍来访问HBase表，就像我们有HIve一样，我正在创建Hbase配置和sacnning，并试图放置，但缺少一些链接如何做到这一点(只是从论坛和github复制粘贴，但无法理解)，谁能发布一个端到端的代码，以检索和更新Hbase表的细节？？
或推荐从spark访问的任何Hbase书籍/博客
浏览 0提问于2016-01-29得票数 1
我是Hbase的新手，我只想了解Hbase的写操作。如果多个客户端在同一个表中写入，那么Hbase如何保持对物理文件的顺序写入。
Hbase将数据存储在哪里(我认为是在HDFS中)？
我们可以在HDFS之外存储Hbase数据吗？
浏览 2提问于2013-04-12得票数 0
回答已采纳
1回答
我对create external table在蜂巢中的行为有点迷惑。
如果我执行以下操作：
CREATE EXTERNAL TABLE hive_hbase_table ( key INT,
name map<STRING,STRING>,
info map<STRING,STRING>)
STORED BY 'org.apache.hadoop.hive.hbase. HBaseStorageHandler'
WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,Custo
浏览 1提问于2015-02-06得票数 0
1回答
据我理解，Hbase是Hadoop数据库，Hive是数据仓库。
Hive允许创建表并在其中存储数据，还可以将现有的HBase表映射到Hive并对其进行操作。
为什么我们应该使用hbase如果蜂窝做所有这些？我们能单独使用蜂箱吗？我很困惑：
浏览 3提问于2015-01-07得票数 1
回答已采纳
在Hive表上，我可以创建外部表来保存特定HDFS位置上的数据。我想在HBase上做类似的事情，这样就可以将HBase表数据保存在外部HDFS位置上。在类似于Hive的HBase上可以这样做吗？我想知道HDFS上保存HBase表数据的默认路径是什么？
谢谢
浏览 4提问于2020-12-18得票数 0
回答已采纳
我在Postgres中有一个表，但现在我应该实现Hbase作为后端数据库，所以我想将下面的表移动到Hbase中，如何重新设计这个表？我是Hbase的新手。
id geom osm_id name type
1 00003381C75CBE6443 24254755 Millenium Hall office
2 00003382D5B5D76S3G ...
...
浏览 0提问于2014-04-14得票数 0
2回答
我已经使用hive在hbase中创建了一个表：
hive> CREATE TABLE hbase_table_emp(id int, name string, role string)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'
WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,cf1:name,cf1:role")
TBLPROPERTIES ("hbase.table.name" =
浏览 3提问于2015-01-30得票数 1
回答已采纳
1回答
我的hbase表的结构如下：
a1:b1
a1:b2
a2:b1
a3:b2
有没有什么方法可以有效地检查hbase表中是否存在行键的第一部分？我不想检索记录，我只想检查a1、a2、a3是否存在。
浏览 14提问于2019-07-11得票数 0
回答已采纳
我使用gremlin服务器和hbase作为后端。我读到为了存储多个图，我们必须使用不同的表，所以我在hbase中以不同的表名存储了多个图。
属性storage.hbase.tablename在titan hbase.properties .But中指定，我必须根据组动态提供图形，并且不能在hbase.properties文件中指定表名(可能有数百个图形)。
实现这一目标的方法是什么？
浏览 4提问于2017-04-18得票数 2
我在HDFS中有数据。我想把这些数据加载到hbase和hive表中。我已经写了一个bash shell脚本，在其中我已经写了一个猪脚本加载数据从HDFS到HBASE，也写了hive脚本加载数据从HDFS到HIVE表，这是完美的fine.Here我的HDFS数据文件具有相同的结构，我正在加载所有的数据文件到单一的hbase和hive表。
现在我的查询是假设如果我在HDFS目录中接收到更多的数据文件，并且如果我再次运行shell脚本，它将再次创建具有相同名称的hbase和hive表，并告知表已经存在。如何编写配置单元和hbase查询，以便第一次检查表是否存在，如果表不存在，则第一次创建表，并将数据
浏览 2提问于2014-05-21得票数 0
我是第一次接触Pentaho和HBase。我想从Hbase表中读取所有列，并使用Pentaho将其加载到平面文件中。
主要的一点是，我的Hbase表中的列不是静态的。有些时候我会得到30+列，有些时候可能会变成50+。
我尝试在PDI中使用'Hbase输入‘。但是我不能定义列数。有没有办法在五角大楼中定义动态变化的列？？
浏览 3提问于2015-08-12得票数 0
在我的hadoop映射器任务中，我通过扫描reduce任务中的hbase表创建了一个键，value = sortKey，rowID，当我执行Result=Htable.get(rowID)时，对于不同的rowIds，有些会随机返回null。但是在hbase shell中查询时，我能够获取相同的rowId。对于1000的输入hbase表行计数(映射器能够获取所有这些记录)，大约有100条记录返回htable.get(rowID)为null (在reducer中)，但是所有这100条记录实际上在表中都是可用的。
你知道为什么htable上的'get‘会随机返回null吗？任何缓存或内存调整
浏览 1提问于2013-02-13得票数 0
回答已采纳
当我运行sql创建表时，如下所示：
CREATE TABLE FM_DAY(
APPID VARCHAR NOT NULL,
CREATETIME VARCHAR NOT NULL,
PLATFORM VARCHAR NOT NULL,
USERCOUNT UNSIGNED_LONG,
LONGCOUNT UNSIGNED_LONG,
USERCOUNT UNSIGNED_LONG,
CONSTRAINT PK PRIMARY KEY (APPID,CREATETIME,PL
浏览 17提问于2016-03-01得票数 0
我想要镜像我们的生产/测试HBase环境，用于本地开发和基本集成测试。虽然我知道HBase是无模式的，但表必须存在，并且需要定义和启用列族，然后才能与其交互。
有没有一个简单的工具/脚本可以指向HBase实例，并生成该实例中所有表的可导入文件或可运行脚本。理想情况下，这将能够用它提取一些小样本数据。
免责声明我是HBase的新手，所以如果我有一些基本的架构概念错误，请随时纠正我。
浏览 1提问于2013-10-23得票数 0
2回答
假设我通过不同的转换(连接、映射等)创建了dataset，并将其保存到hbase中的表A中。现在，我希望通过选择特定的列将相同的数据集保存到hbase中的另一个表中。在这种情况下，是否应该在保存到表A后使用持久化函数？或者，如果我只使用select函数，这不重要吗？
例如：
Dataset<Row> ds = //computing dataset by different transformations
//save ds to table A in hbase
ds.persist();
Dataset<Row> ds2 = ds.select(col("
浏览 7提问于2017-11-20得票数 2
回答已采纳
1回答
HBase到Delta表
、、、、
我们正在将Hadoop工作负载迁移到Azure Databricks。在现有的Hadoop生态系统中，我们有一些HBase表，其中包含一些数据(不是很大)。由于不支持Hbase，所以我们正在计划是否可以用Delta表替换HBase表。这在技术上是否可行，如果是的话，我们在迁移或目标系统中是否可能面临任何挑战或问题。
浏览 3提问于2022-01-17得票数 1
回答已采纳
2回答
我试图在oozie上运行一个MapReduce作业，该作业以HBase表快照为输入。目前，我可以使用org.apache.hadoop.hbase.mapreduce.TableMapReduceUtil来完成它(不使用oozie工作流)，这为我提供了一个initTableSnapshotMapperJob()方法。
在oozie中是否有类似的选项，其中我可以将HBase快照指定为映射减少作业的输入。如果不是，其他的选择是什么？
浏览 7提问于2015-03-05得票数 0
回答已采纳
1回答
hive-hbase集成抛出类
、、、、
使用此链接
我正在尝试集成hive和hbase，在hivesite.xml中有这样的配置：
<property>
<name>hive.aux.jars.path</name>
<value>
file:///$HIVE_HOME/lib/hive-hbase-handler-2.0.0.jar,
file:///$HIVE_HOME/lib/hive-ant-2.0.0.jar,
file:///$HIVE_HOME/lib/protobuf-java-2.5.0.jar,
file:///$HIVE_H
浏览 3提问于2016-05-09得票数 1
回答已采纳
3回答
我正在使用java中的HBase API，并且正在运行一个测试程序来检索和创建HBase表中的一些记录。我的HBase是在亚马逊EC2 linux实例上配置的。我正在尝试设置zookeeper IP和端口，但在.set处出现错误
Configuration conf = new Configuration();
conf.set("hbase.zookeeper.quorum", HBaseConf.zookeeperIP);
conf.set("hbase.zookeeper.property.clientPort", HBaseConf.zookeeperP
浏览 0提问于2015-02-10得票数 0
我想删除HBase中的所有表。我正在使用HBase外壳命令来执行此操作：
$ hbase shell
> disable_all .*
> drop_all .*
如何编写shell脚本来执行此操作？
注意:在执行上述命令时，它会在禁用和删除所有表之前要求用户确认，即y/n。
浏览 17提问于2015-06-30得票数 7
4回答
我刚开始使用Maven。
我有一些有依赖关系的Java文件。例如：
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.client.Delete;
import org.apache.hadoop.hbase.client.Get;
import org.apache.hadoop.hbase.client.HTable;
import org.apache.hadoop.hbase.client.Put;
在开发
浏览 2提问于2011-08-30得票数 0
回答已采纳
我有一个map reduce作业，其中每个映射器需要多次多次随机访问另一个HBase表。我想知道对HBase表的大量随机访问(并发，由于映射器并发运行)的效率如何。
非常感谢!
浏览 0提问于2011-12-06得票数 0
1回答
我通过Nutch 2.3.1爬行了一些数据。数据存储在Hbase 0.98表中。我已经创建了一个外部表，用于从hbase表导入数据。现在，我必须将这些数据索引到solr 4.10.3。为此，我遵循了众所周知的教程。我创建了蜂巢表
create external table if not exists solr_items (
id STRING,
content STRING,
url STRING,
title STRING
) ROW FORMAT DELIMITED FIELDS TERMINATED BY '|'
stored by &
浏览 2提问于2016-10-19得票数 0
回答已采纳
2回答
我正在尝试从hive表加载hbase表，因为我使用了以下方法，如果我在hbase表中只有一个列家族，那么它可以很好地工作，但是如果我有多个家族，它会抛出错误。
逼近
源表
CREATE EXTERNAL TABLE temp.employee_orc(id String, name String, Age int)
STORED AS ORC
LOCATION '/tmp/employee_orc/table';
用Hbase Serde创建Hive表
CREATE TABLE temp.employee_hbase(id String, name String, age in
浏览 2提问于2018-06-05得票数 1
作为火花作业的结果，我有1亿条记录要插入到HBase表(菲尼克斯)。我想知道，如果我将它转换成一个Dataframe并保存它，它会进行大容量加载(或)它不是将数据写入菲尼克斯HBase表的有效方法吗？
浏览 1提问于2016-05-18得票数 2
回答已采纳
我想了解一些关于hbase shell命令的基本知识。
我可以在创建hbase表之后添加新的列家族吗？
根据两列获取行键和列数据的hbase命令是什么？
我创建了一个hbase表，如下所示。
create 'employee' ,'personaldetails'
我插入了一些行并添加了一些列。
put 'employee','1000','personaldetails:name','surender'
put 'employee','1000',&
浏览 3提问于2014-06-14得票数 0
我是Hadoop新手，最近安装了Hive和HBase。
我在Hive中创建了几个表，查询以MapReduce的方式运行。而且，当我在HBase中说'get‘时，它不是在MapReduce中运行的，这就是为什么我认为它具有很高的延迟。
我在这里几乎没有什么疑问。
如果我有一个需要处理实时流数据的应用程序，我应该使用什么- Hive或HBase
我是否可以使用HBase选项安装MapReduce，以便HBase中的get命令以MapReduce方式运行？
提前感谢
浏览 0提问于2014-05-31得票数 0
回答已采纳
1回答
HBase如何执行查找和检索记录？例如，RDBMS的B树在HBase中的等效值是什么？
编辑
我理解HBase如何解析-ROOT-和.META.表，以找出哪个区域保存数据。但是本地查找是如何执行的呢？
为了更好地说明，下面是一个例子：
我正在开始搜索(获取或扫描)记录与键77。
HBase客户端表示密钥包含在由RegionServer X持有的50-100区域。
HBase客户端联系RegionServer X以获取数据。
RegionServer X是如何找到记录77的位置的？
RegionServer是否使用某种查找表(例如，RDBMS的B树)？为了一个区域的钥匙？还是
浏览 5提问于2012-10-16得票数 6
1回答
如何在HBase中刷新表格
、、、、
我使用的是HBase (客户端0.98，服务器为HBase 1.1.2)，底层数据存储为HDFS。
我尝试使用以下代码刷新该表，并能够看到刷新到Hadoop中的HFile位置的数据。
htable.put(puts);
htable.close();
admin.flush(tableName);
Hadoop中的数据位置
./hadoop fs -du /hbase/data/default/tableName/
当我关闭电源并重新启动节点，重新启动Hadoop时，HBase能够看到HDFS中的数据被损坏。
如果数据被
浏览 0提问于2017-01-11得票数 5
2回答
我正在尝试使用下面的命令在Hbase命名空间中创建表，但遇到权限问题。
hbase(main):010:0> create 'hbasetest:my_table', 'fam'
ERROR: org.apache.hadoop.hbase.security.AccessDeniedException: Insufficient permissions for user 'qjdht' (global, action=CREATE)
我给了用户'qjdht‘权限。
hbase(main):003:0> grant '
浏览 0提问于2015-07-30得票数 1
1回答
每个HBase表的减速器
、、、
基本上，我需要将数据路由到正确的减速机。每个减速机都将是一个TableReducer。
我有以下文件
venodor1，user1，xxxx=n venodor1，user1，xxxx=n venodor2，user2，xxxx=n venodor2，user2，xxxx=n
我需要将它插入到以下hbase表中
表vendor1: user1 => {data:xxxx = n} user2 => {data:xxxx = n}
表vendor2: user1 => {data:xxxx = n} user2 => {data:xxxx = n}
格式为ROW_ID =
浏览 2提问于2010-07-20得票数 1
回答已采纳
我想在hbase接收器表中写入数据，我有兼容flink版本1.14.4的Hbase版本2.2.0，我将接收器hbase表定义如下：
sink_ddl = """
CREATE TABLE hTable (
datemin STRING,
family2 ROW<datemax STRING>,
family3 ROW<channel_title STRING, channel_id STRING>,
PRIMARY KEY (datem
浏览 24提问于2022-10-24得票数 -1
回答已采纳
1回答
我混淆了连接hbase表从不同的计算机使用Hive。
我还尝试了这个配置单元查询：
CREATE EXTERNAL TABLE tabel_apik(key string, val1 string)STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'WITH SERDEPROPERTIES ("hbase.columns.mapping" = "web:teks")TBLPROPERTIES("hbase.table.name" = "hbase_tabe
浏览 0提问于2015-11-25得票数 0
2回答
我有一个Hbase表"http_access_log"，现在我想在上面使用Apache phoenix for SQL。
我应该创建phoenix视图或表来映射hbase表吗？如果hbase表由hbase api更新，phoenix视图或表是否会更新？
浏览 1提问于2015-04-24得票数 5
使用插入的时间戳根据时间段获取hbase表行数的最简单方法是什么？我只发现使用：
hbase> count ‘t1’, INTERVAL => 100000
这并不能解决我的问题。似乎还有另一个选择，但我得到的结果是0吗？
hbase> get 'hbase_output', '*', {TIMERANGE => [1445212800,1445299200]}
COLUMN CELL
0 row(s) in 0.0900 seconds
这是做这件事的唯一两个选择吗？
浏览 0提问于2015-10-21得票数 0
我们有一个带有hadoop-1.0.1的hbase-0.94集群。我们不希望在使用hadoop-2.5.1升级到hbase-0.98时此群集出现宕机
我使用hadoop-2.5.1配置了另一个hbase-0.98集群，并希望将hbase-0.94表复制到hbase-0.98。Hbase CopyTable似乎不适用于此目的。
请建议一种执行上述任务的方法。
浏览 2提问于2016-07-27得票数 2
我是HBase的新手。有没有人可以给我提供一个关于如何在HBase表中进行批量加载的详细示例。
例如，我有一个10列、100K行的客户文件。我想将文件加载到HBase表中。
我已经创建了一个由HIVE管理的HBase表，并尝试使用load命令加载该表，但失败了。
看起来我只需要从HBase插入表。
hive (Koushik)> CREATE TABLE hive_hbase_emp_sample(eid int, ename string, esal double)
> STORED BY 'org.apache.hadoop.hive.hb
浏览 1提问于2016-07-08得票数 1
1回答
我想通过HBase shell创建一个精简版本的Hbase表。例如: HBase中已经存在HBase表'test‘，其中包含以下信息：
TableName: 'test'
ColumnFamily: 'f'
Columns: 'f:col1', 'f:col2', 'f:col3', 'f:col4'
我想在HBase 'test_reduced‘中创建另一个表，如下所示
TableName: 'test_reduced'
ColumnFamily: 'f&#
浏览 19提问于2016-07-20得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
