腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
有没有
办法
合并
多个
HBASE
区域
?
我有一个具有小
区域
大小(
hbase
.hregion.max.filesize=1GB)的
HBase
表,因此我最终得到了数千个
区域
。 我知道有一个命令行工具可以
合并
两个
区域
。
有没有
一种工具可以把所有的
区域
合并
成一组更小的
区域
。例如,
合并
区域
直到每个
区域
为10 is? 或者我需要编写我自己的实用程序?
浏览 11
提问于2019-06-20
得票数 0
1
回答
Hbase
如何在
多个
regionServer中拆分记录?
、
、
我有
Hbase
的集群设置:我想知道:当我们在表中插入多行时,
Hbase
是如何将记录拆分到
多个
regionServer中的?如果是,则
Hbase
如何在事务表中维护排序的键顺序。 我在表信息中读到了元表,比如(Table_name,Region(StartKey-EndKey)),正确吗?
浏览 1
提问于2012-12-05
得票数 2
回答已采纳
2
回答
如何让
hbase
对已有地域数据兼容hregion.max.filesize
我使用的是
HBase
的默认配置。对于每个
区域
服务器,我都有很多
区域
。<property> <value>4294967296</value如何强制
HBase
合并
hfile以遵守现有数据的此配置?
浏览 0
提问于2013-01-09
得票数 1
回答已采纳
1
回答
在
HBase
中自动分发数据(无需预拆分)
、
Salting, Hashing, and reversing of key, are recognise as techniques to avoid region Hot-spotting in
HBase
然而,当我尝试通过应用盐化和反转关键方法(在两个不同的场景中)来摄取8000个数据记录时,我仍然看到我的所有数据都被摄取到一个
区域
中。我想知道,当试图避免
区域
热点时,是否需要在表创建时进行
HBase
表的预拆分,以便从
HBase
中的加盐和反转关键字中受益。
有没有
一种技术可以在不执行m
浏览 28
提问于2021-10-31
得票数 1
1
回答
按表重新平衡
hbase
区域
HBase
版本为0.98。重新启动
HBase
后,所有
区域
都会在群集节点上打乱排列,并且它们不是均匀分布的。因此,我使用命令balancer来重新平衡表。但是
区域
并不是通过表格来平衡的。如下图所示。
有没有
办法
让所有地域都按表均衡?
浏览 3
提问于2016-06-09
得票数 0
2
回答
从映射器写入单个文件
、
我在mapreduce上工作,这是从一些从
HBase
读取的数据生成CSV文件。
有没有
办法
在没有reduce阶段的情况下从映射器写入单个文件(或者在作业结束时
合并
映射器生成的
多个
文件)?
浏览 0
提问于2012-03-15
得票数 2
回答已采纳
2
回答
Hbase
地区数量持续增长
、
、
我们正在使用
hbase
版本1.1.4。DB有大约40个表,每个表数据都指定了一个TimeToLive。它部署在一个5节点集群上,下面是
hbase
-site.xml<name>phoenix.query.threadPoolSize</name><name>
hbase
.hregion.memstore.block.multiplier</
浏览 0
提问于2017-01-31
得票数 0
回答已采纳
2
回答
HBase
会将同一行的列族存储在不同的机器上吗?
同一行的列族属于同一RegionServer表。所以,这里的问题是,一个RegionServer会在不同的机器上存储不同的列族吗?
浏览 1
提问于2010-11-22
得票数 8
1
回答
将数据查询到
HBase
并与配置单元集成会对性能产生影响
、
、
我们将oracle表sqooping到
HBase
,并在Hive中创建映射表,似乎在sqooping时,所有数据都将转到一个
区域
,因此当我在hive上查询时,只执行一个map taks来获取记录。
浏览 1
提问于2013-10-23
得票数 0
1
回答
Hbase
合并
后
区域
为何再次拆分
、
hbase
(main):067:0> version我有一个有12个节点的
hbase
设置,其中一个表有36个
区域
,分布在11个节点上,我在线
合并
了连续的
区域
(使用merge_region),并生成了18个
区域
。在那之后,一个小的压缩开始了,
区域
再次分裂,
区域
的数量增加到32个。为什么会发生这种情况,如何跟踪和理解这种行为?
浏览 11
提问于2018-02-05
得票数 0
1
回答
Hbase
表拆分
区域
卡住,如何解决
、
我的
hbase
版本是1.1.2.2.5,它是通过ambari安装的。 有2000个
hbase
table carpass在线
区域
,有800个拆分
区域
。经过长时间的观察,发现分裂
区域
不断增加,并且没有减少。这个表还在不断导入数据,如何解决这个问题?顺便说一下,我还在
hbase
shell中实现了拆分carpass,在线
区域
从1600
多个
增加到2000
多个
。
浏览 3
提问于2019-08-24
得票数 0
1
回答
当
HBase
表在
多个
区域
拆分时,如何计算
区域
中的行数
如何使用
hbase
shell计算
区域
中的记录数?如果有一个
区域
,我可以扫描该表并获得记录的数量,但是如果表被分割成
多个
区域
,我可以使用
hbase
shell上的命令来获取这些信息吗?谢谢!
浏览 5
提问于2013-09-17
得票数 1
1
回答
HBase
表为空,但
区域
增加
、
、
我在下面创建了一个表,我已经向这个表中写入了一些数据。default user_recommend_stories 17 'user_recommend_stories', {NAME => 'a', TTL => '259200 SECONDS (3 DAYS)'}, {NAME => 'c', TTL => '259200 SECONDS (3 DAYS
浏览 4
提问于2015-06-08
得票数 1
1
回答
在Spark的MLlib中使用TFIDF生成过程中的内存不足异常
、
、
、
为了给出一个规模概念,我从
HBase
中读取了大约61.5万个(约4GB的文本数据)小文档,并运行了带有8核和6GB执行器内存的spark程序。我已经尝试过增加并行级别和洗牌内存分数,但没有效果。
浏览 1
提问于2014-09-18
得票数 4
回答已采纳
1
回答
了解
hbase
如何使用hdfs
、
、
我试图了解
hbase
是如何使用hdfs的。以下是我所理解的(如果我错了,请纠正我): 我知道
hbase
使用hdfs存储数据,数据被分割成
区域
,每个
区域
服务器服务于
多个
区域
,因此我猜想一个
区域
(独占)可以与
多个
数据节点通信以获取和放置数据,因此如果这是正确的,那么如果该
区域
服务器失败,那么存储在该数据节点中的数据将无法再访问。
浏览 3
提问于2016-10-04
得票数 1
回答已采纳
1
回答
从
HBASE
数据返回聚合
、
、
我有一个大约有150k行的
HBASE
表,每个表包含3700列。row1 + row2 ... +行我可以使用扫描仪来做这件事,问题是,我认为,扫描仪就像一个光标,它并不是同时执行分布在多台机器上的工作,而是从一个
区域
获取数据,然后跳转到另一个
区域
来获取下一组数据,以此类推,我的结果跨越
多个
区域
有没有
办法
以分布式的方式进行扫描(一种选择,或者为每个
区域<
浏览 0
提问于2010-12-30
得票数 2
1
回答
确保
hbase
的数据局部性
、
是否有
办法
确保我的火花执行器与我的
Hbase
区域
服务器共存?在霍顿的“
HBase
星火”中,提到了以下内容: sparkContext.newHadoopApi() 它能确保数据的局部性吗?
浏览 2
提问于2016-08-10
得票数 3
1
回答
HBase
是否使用主索引?
、
、
、
HBase
如何执行查找和检索记录?例如,RDBMS的B树在
HBase
中的等效值是什么?我理解
HBase
如何解析-ROOT-和.META.表,以找出哪个
区域
保存数据。
HBase
客户端表示密钥包含在由RegionServer X持有的50-100
区域
。
HBase
客户端联系RegionServer X以获取数据。为了一个
区域
的钥匙?还是需要阅读StoreFiles的所有内容,以获得从50到77的记录?
浏览 5
提问于2012-10-16
得票数 6
1
回答
如何正确地从没有
区域
信息的行中清除
HBase
元表?
、
、
我有
HBase
元表,它包含一些关于已经删除的表
区域
的记录。那行不包含
区域
信息,所以没有什么真正有害的,但无论如何,它不是那么好。我试过
hbase
hbck和
hbase
hbck -fixMeta ..。他们都认为这种情况是正常的,不做任何更正,但当我使用API
HBase
检查
区域
位置时,会输出大量关于元数据中的记录的警告,这些记录中没有嵌入
区域
信息,这实际上是正确的。
HBase
0.94.6 (ClouderaCDH4.4)。这种情况
浏览 0
提问于2013-10-24
得票数 0
回答已采纳
1
回答
在
HBase
中,startrow和stoprow的使用如何不会导致全表扫描?
、
yield rowkey if is_found:显然,
HBase
TLDR:当使用startrow和stoprow进行范围扫描时,
HBase
如何避免全表扫描?
浏览 4
提问于2016-10-22
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
多个PDF合并成一个文件的简单办法
有没有多个视频合成一个视频的软件?视频合并工具就在这!
从 Excel 数据表中筛选出符合多个条件的所有区域,教你两个办法
Hbase中对数据 增删改查 工作流程
HBase 数据模型,体系架构,组件功能说明等总结
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券