Hadoop用于处理大数据，hadoop使用HBase作为其数据库，但BigData可能80%是非结构化的，HBase只存储结构化数据。
非结构化数据存储在哪里？或者是否有hadoop工具将非结构化数据转换为结构化格式？
浏览 0提问于2018-10-20得票数 0
回答已采纳
3回答
我是大数据技术的新手，我有一个关于hbase如何与hadoop集成的问题。"Hbase位于HDFS之上“是什么意思？我的理解是，HDFS是分布在多个节点上的结构化和非结构化数据的集合，而HBase是结构化数据。
如何将Hbase与Hadoop集成，以提供对底层数据的实时访问。换句话说，Hbase和hdfs之间是否有一个额外的层，其中包含HBase所理解的结构中的数据。
浏览 8提问于2016-03-27得票数 1
回答已采纳
我相信HiveQL可以以类似于SQL的方式在HBase上运行，而且几乎是实时的。如果是这样的话，我认为有必要将HDFS上的非结构化数据转换为结构化数据，以便在HQL中运行相对较快的查询。这是否意味着数据以非结构化形式以HDFS形式存在，然后以结构化形式复制到HDFS上供HBase和HQL使用？
此外，HiveQL是否可以以批处理模式(小时)直接运行在HDFS上的非结构化数据上。
浏览 1提问于2015-08-30得票数 0
1回答
猪窝Hbase的不同之处
、、、
我正在尝试弄清楚这些Pig Hive和Hbase用于哪种类型的数据(结构化、非结构化、半结构化)？
在哪种情况下使用哪种工具更有效？
浏览 3提问于2015-01-05得票数 0
1回答
那么，由于我目前使用的是VMware VSphere EXSi Hadoop，什么样的体系结构可以帮助我
Habse XAMPP所有这些都很好，但是我不知道如何接收大量数据和如何存储数据，因为我发现Hbase
浏览 1提问于2015-10-05得票数 0
回答已采纳
1回答
我了解到HDFS用于存储更多的结构化数据，而HBase用于存储非结构化数据。我有一个REST，在这里我需要获取数据并将其加载到数据仓库(HDFS/HBase)。数据采用JSON格式。HDFS还是HBase？另外，你能告诉我一些教程来做这件事。我偶然发现了关于的事情。但我不确定这是否符合我的用例。
如果你能引导我找到解决这个问题的特定资源/技术，那将是很有帮助的。
浏览 1提问于2017-08-09得票数 1
回答已采纳
1回答
我目前正在做一个将数据加载到HBase中的应用程序，我选择了HBase，因为数据不是结构化的，因此建议使用基于列的数据库。一旦数据在HBase中，我就想将Solr集成到它，但是我发现关于这个主题的信息很少，我的问题"“也没有答案，所以我想问如何查询存储在HBase中的数据？火花流似乎不适合这一点。有什么帮助吗？
浏览 0提问于2016-04-18得票数 0
回答已采纳
3回答
我知道HBASE是一个柱状数据库，它将表的结构化数据按列而不是按行存储到HDFS中。我知道Spark可以从HDFS读/写，还有一些用于Spark的HBASE连接器现在也可以读写HBASE表。问题：
1)在HBASE之上分层火花而不是单独使用HBASE所带来的附加功能是什么？它只取决于程序员的能力，或者有任何性能原因来这样做？是否有星火所能做的事，而HBASE却无法做到？2)源于前面的问题，什么时候应该在HDFS和SPARK之间添加HBASE，
浏览 4提问于2016-08-13得票数 9
回答已采纳
1回答
我们有一个需求，即结构化数据和非结构化数据都进入系统。我们需要对两者都进行索引，然后启用搜索功能。我们在Hadoop平台上使用SolrCloud。对于结构化数据，我们计划将数据放入HBase中，而非结构化数据则直接放入HDFS中。提前谢谢。
浏览 8提问于2015-03-29得票数 0
回答已采纳
似乎自由文本索引的正确工具是Lucene，而结构化稀疏元数据的正确工具是HBase。我需要查询数据，并在自由文本搜索结果和结构化数据结果之间进行连接(例如，获取文本中包含“早上好”短语并且于1980年首次出版的所有图书)。
我应该使用什么工具/机制来连接结构化和非结构化查询？
浏览 3提问于2011-08-01得票数 5
回答已采纳
1回答
我使用Spark流来处理在线需求，例如每小时新的用户计数如下：这种方法经常使用表格，花费太大现在我想用结构化流来解决这个问题。，因此结构化流不支持多重聚合，因此我使用如下方法：
我不知道我的方法能否解决这个问题，
浏览 3提问于2017-09-08得票数 0
回答已采纳
1回答
我玩过不同的条纹地图，减少字数的例子，其中Hadoop/Hbase似乎采取了一个大的文件，并打破它(在行中断)在节点之间的平等。然后，它将部分文档的每一行提交到代码的映射部分。我的问题是，当我有很多小的非结构化和半结构化文档时，如何让Hadoop将整个文档提交给我的地图代码？
浏览 1提问于2015-04-20得票数 0
回答已采纳
4回答
我试着对HBASE有一个清晰的理解。
考虑到他们从事的工作类型，他们不是都一样吗？另外，我们不能在已经存在的HDFS文件上创建Hbase表，这是真的吗？
浏览 6提问于2014-02-18得票数 1
默认情况下，它不是分布式的，所以我正在考虑迁移到像HBase或Hadoop这样的东西。
像HBase或Hypertable这样的解决方案有内置的搜索功能吗?或者我需要在它们之上实现Lucene吗？
浏览 0提问于2011-02-11得票数 2
在巨大的HBase中，city_id是一个关键： 123；纽约；....124；洛杉矶；....等。我的方法是在HBase上创建一个外部配置单元表，其中包含我需要的列。但话又说回来，我不知道如何以最有效的方式加入他们。 我想有一种方法可以直接从HBase完成，但我同样不知道如何做到这一点。
浏览 14提问于2019-12-12得票数 1
回答已采纳
我有一个简单的结构化实时输入。但它的值中也有垃圾，比如在某些地方有'@‘或十六进制字符。我这里的水槽将是hbase。
浏览 6提问于2016-03-16得票数 1
6回答
因此，如果有人能帮助我清楚地理解HBase和Hadoop之间的区别，或者如果有人能给我一些指点，也许能帮助我理解其中的区别。
到目前为止，我做了一些研究和访问。据我所知，Hadoop提供了一个框架来处理HDFS中的原始数据块(文件)，而HBase是Hadoop之上的数据库引擎，它基本上是处理结构化数据而不是原始数据块。Hbase在HDFS上提供了一个逻辑层，就像SQL一样。这是正确的吗？
浏览 2提问于2013-06-05得票数 140
回答已采纳
所以我创建了一个HDFS接收器和一个HBase接收器，他们正在收集tweet.但是HBase中的数据不是很好的结构。
由于数据不是结构化的，所以我不能对其进行查询。我现在在Hbase上有这样的内容：所有的东西都在专栏推特上.
浏览 2提问于2014-06-27得票数 0
回答已采纳
1回答
通过结构化流管道处理每条消息的“推荐”方法是什么(我在spark 2.1.1上，源是Kafka 0.10.2.1)？到目前为止，我正在研究dataframe.mapPartitions (因为我需要连接到HBase，因为它的客户端连接类是不可测试的，因此是mapPartitions)。
想法？
浏览 2提问于2017-05-25得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
