1回答
我有一个包含列的表，是否可以基于使用该列的表达式创建分区 我读到IBM的Big SQL技术有这个特性。 我也知道我们可以用一个列来划分hive，但是表达式呢？在本例中，我要做的是一个cast..it可以是任何表达式 CREATE TABLE INVENTORY_A ( product varchar(50),
trans_tstimest
浏览 14提问于2019-04-09得票数 0
2回答
从蜂巢视图加载蜂巢分区
、、、
我有一个带有4个分区的外部Hive表。基于不同的蜂巢表，我还有4个蜂巢视图。CREATE TABLE hive_table AS SELECT * FROM hive_view;
但是，是否有一种从视图
浏览 3提问于2014-10-10得票数 0
回答已采纳
1回答
我是新来蜂巢的general.From中的hadoop生态系统我学到了Hive的基础知识您可以基于某个attributes.And在hive表上创建分区如果查询提到了该属性，那么它应该会获得性能提升，因为hive只扫描特定的分区文件，而不是扫描整个table.My问题是假设我们在data.Say中有一些分层结构我根据唯一的状态值对表进行分区，每次查询基于<
浏览 0提问于2020-06-03得票数 0
我们计划从CDH3迁移到CDH4，作为迁移的一部分，我们还计划将HBASE引入外部系统，因为它还会更新数据，在CDH3中，我们使用Hive作为仓库。在这里我们遇到了迁移中的主要问题，Hive支持分区到表。我们的系统有许多不同模式的表，有些表有基于日期的分区，我们有过去5年的数据历史(有些表中存在365*5个分区
浏览 3提问于2013-09-25得票数 3
我正在将一个java应用程序从Hadoop/Hive移植到Google /BigQuery。应用程序将avro文件写入hdfs，然后在文件之上创建一个/多个分区的Hive外部表。据我所知，Big目前只支持日期/时间戳分区，不支持嵌套分区。
我们现在处理hive的方式是生成ddl，然后使用rest调用执行它。我在BigQuery docs中找不到对创建外部表<e
浏览 0提问于2018-08-17得票数 0
回答已采纳
1回答
我正在创建一个引用HDFS位置中的ORC文件的外部表。ORC文件的存储方式是按照日期对外部表进行分区(映射到HDFS上的date wise文件夹，作为分区)。然而，我想知道我是否可以在这些外部表上强制'Bucketing‘，因为底层数据/文件不是由hive’管理‘的。它们是在外部编写的，因此可以在Hive外部表中使用bucketing吗？但我不能理解hi
浏览 17提问于2020-07-30得票数 1
回答已采纳
4回答
用星星之火覆盖蜂窝分区
、、、、
我正在使用AWS，我有使用Spark和Hive的工作流。我的数据是按日期划分的，所以每天我在S3存储中都有一个新的分区。我的问题是，当有一天加载数据失败时，我必须重新执行该分区。通过搜索，我发现Hive支持这种覆盖，只支持分区，但是使用hql语句，我没有它。
我们需要Hive上的解决方案，所以我们不能使用这个 (直接到csv)。我发现这个应该能解
浏览 2提问于2018-04-23得票数 11
回答已采纳
我在这里复习过，
此外，设置此选项是否等同于执行以下操作？cat hive_script.hql | parallel --gnu hive -e '{}'
我的hive脚本可以按任何顺序运行，因为它只是为现有表的每个新(基于时间的)
浏览 3提问于2014-01-27得票数 1
回答已采纳
如何使用java映射减少创建动态分区，就像sql一样，按国家列分组。例如，我有基于国家的数据集，需要根据国家(分区)分离记录。我们不能限制国家。因为每天都会有新的国家数据。
浏览 1提问于2018-04-29得票数 0
回答已采纳
1回答
sqoop是否支持使用hive进行动态分区？我尝试使用下面提到的选项：--hive-partition key和--hive=partition vlaue仅用于静态分区
例如: sqoop import --connect“jdbc:mysql://ickstart.cloudera:3306/prac”--username root --password cloudera --hive-import
浏览 1提问于2017-09-17得票数 0
1回答
我希望对旧分区的Hive表支持保留。基本上，我需要在特定时间段后自动删除配置单元分区。我可以手动执行此操作，也可以使用脚本执行此操作，但我注意到每个配置单元表中都存在保留属性，但我找不到有关它的许多信息。例如，在配置单元表中使用descibe时，会有一个保留属性 desc formatted my_hive_table;col_name data_type我找到了这个2014年的Jira，但我不
浏览 11提问于2019-04-02得票数 0
当我需要将一列更改为分区()时，我希望创建一个新表来复制除一列之外的所有列。我目前在原始表中有>50列。有什么干净的方法可以做到这一点吗？
浏览 1提问于2015-08-28得票数 1
5回答
如何删除当前加载在Hive表中的所有分区？我可以用恢复分区语句加载所有分区。但我似乎不能放弃所有分区。
我使用的是EMR支持的最新的Hive版本，0.8.1。
浏览 3提问于2013-03-19得票数 14
回答已采纳
1回答
我正在尝试物化基于文件的hive表，这些文件在GCS中存储为parquet，路径类似于gs://abc/dt=02-02-2019/hr=02(基于UTC的物理分区) 现在我想创建两个hive表，其中的逻辑分区基于时区，一个用于UTC，另一个用于CET，我如何进行分区，以便基于日期和小时的分区</e
浏览 10提问于2019-02-14得票数 0
1回答
我正在使用Hadoop，并面临着大量小文件的可怕问题。我需要能够从现有的蜂巢分区中创建har档案，并同时查询它们。然而，Hive显然只支持在托管表中存档分区，而不支持在外部表中存档--这是非常可悲的。我试图通过使用hadoop的归档工具手动归档分区目录中的文件来找到解决办法。现在，我需要配置hive，以便能够查询存储在这些归档文
浏览 3提问于2016-06-03得票数 1
回答已采纳
3回答
蜂巢比星火更快吗？
、、、、
我不知道这是否会在星火更慢，因为现在与DataFrames，他们可能是可比的，但我不确定，因此问题。他使用最新的蜂巢，这似乎是使用Tez。
浏览 11提问于2016-09-09得票数 6
回答已采纳
1回答
执行前蜂箱查询执行估计的强度
、、、、
我支持带有HIVE服务的Hadoop集群，但是我不是一个HIVE开发人员。其中一个开发人员正在运行一个长查询(请参见下面的示例)。作业失败与一些神秘的错误信息(请参阅下文)。我如何知道查询是否会过于紧张？
当我监视Hive服务器时，负载仅为(w输出) 1.5，网络带宽达到5.7 Mbps/秒的峰值。顶级java进程消耗的CPU不足2%。我没有看到真正的证据表明查询破坏了hive服务器(在<
浏览 20提问于2016-05-05得票数 0
回答已采纳
1回答
Hive中的行级事务
、、、、
我是HiveQL的新手。当我创建一个表时，我意识到我们需要保持事务的某些属性是真的。然后我经历了以下这些：hive>set hive.enforce.bucketing = true;hive>set hive
浏览 1提问于2019-03-04得票数 0
回答已采纳
1回答
今天，我们使用Hive作为我们的数据仓库，主要用于批处理/批量数据处理- hive分析查询/连接等- ETL管道
最近，我们正面临一个问题，我们试图将基于hive的ETL管道公开为服务。在Hive中，一旦创建了分区，我想它们就不能被更改了，也就是说，我们不能在旧分区中添加新的列，而只用数据填充该列。我们必须用新的模式重新创建分区</em
浏览 6提问于2017-04-28得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
